前言

為思明等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計(jì)制作服務(wù)，及思明網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務(wù)為網(wǎng)站設(shè)計(jì)制作、網(wǎng)站制作、思明網(wǎng)站設(shè)計(jì)，以傳統(tǒng)方式定制建設(shè)網(wǎng)站，并提供域名空間備案等一條龍服務(wù)，秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務(wù)。我們深信只要達(dá)到每一位用戶的要求，就會(huì)得到認(rèn)可，從而選擇與我們長期合作。這樣，我們也可以走得更遠(yuǎn)！

日志是系統(tǒng)很重要的一個(gè)組成部分，通過日志可以及時(shí)發(fā)現(xiàn)系統(tǒng)中存在的問題，也可以為修復(fù)問題提供線索。Docker提供了多種插件方式管理日志，本文就對(duì)使用MongoDB存儲(chǔ)Docker日志的過程做個(gè)記錄。

數(shù)據(jù)流

Docker產(chǎn)生的日期 發(fā)送到 FluentD，然后FluentD在轉(zhuǎn)存到MongoDB。

配置Fluentd

前提：操作系統(tǒng)是CentOS7，已安裝MongoDB3.4

1. 安裝Fluentd

CentOS 7的軟件庫并沒有包含F(xiàn)luentd的安裝包，所以需要手動(dòng)安裝。在CentOS使用的軟件td-agent。

# curl -L https://toolbelt.treasuredata.com/sh/install-redhat-td-agent3.sh | sh

上面命令會(huì)在/etct/yum.repo.d/目錄中，創(chuàng)建一個(gè)td-agent的安裝庫 td.repo，然后自動(dòng)安裝td-agent。安裝完畢后設(shè)為自動(dòng)啟動(dòng)。

# systemctl start td-agent
# systemctl enable td-agent

如果在啟動(dòng)過程中出現(xiàn)問題，可以查看位于/var/log/td-agent/下日志文件td-agent.log

2. 配置將docker日志轉(zhuǎn)存到MongoDB

轉(zhuǎn)存到MongoDB需要插件支持，但是默認(rèn)情況下td-agent是沒有安裝該插件的，需要安裝。

# yum -y install td-agent-gemt
# td-agent-gem install fluent-plugin-mongo

編輯/etc/td-agent/td-agent.conf，增加

## match tag=docker.* and dump to mongodb
## 在docker啟動(dòng)容器時(shí)，日志的tag要符合docker.*的形式

 @type mongo
 # 數(shù)據(jù)庫地址
 host 127.0.0.1
 # 數(shù)據(jù)庫端口
 port 22017
 # 存儲(chǔ)日志的數(shù)據(jù)庫和數(shù)據(jù)集名稱
 database docker
 collection log

重啟td-agent。

啟動(dòng)容器

啟動(dòng)容器的命令改為：

$ docker run --mount type=bind,source=/home/demo/app,destination=/app --log-driver=fluentd --log-opt tag="docker.log" python3:latest python3 /app/test.py

運(yùn)行完畢后，可以到MongoDB中查看日志。

后續(xù)

但是在實(shí)際的使用過程中，卻發(fā)現(xiàn)Docker生成的日志并不會(huì)立即寫入到MongoDB中，有大概1分鐘左右的延遲。

查閱Fluentd的文檔得知，有一個(gè)flush參數(shù)可以控制日志的寫入頻率，默認(rèn)的是60s。更改flush_interval參數(shù)就可以提高寫入頻率，具體更改如下：

## match tag=docker.* and dump to console  @type mongo host 127.0.0.1 port 22017 database docker collection log  flush_mode interval flush_interval 1s  

剛開始對(duì)文檔理解不太透徹，增加了flush_interval參數(shù)后，并沒有發(fā)揮作用，第一次更改時(shí)，并沒有將flush_mode和flush_interval放在buffer結(jié)構(gòu)中。也就是：

## match tag=docker.* and dump to console  @type mongo host 127.0.0.1 port 22017 database docker collection log flush_mode interval flush_interval 1s 

從日志中也可以看出上面的配置，并沒有發(fā)揮作用：

2018-01-19 14:33:32 +0800 [warn]: parameter '**flush_mode**' in @type mongo host "1270.0.0.1" port 22017 database "docker" collection "log" flush_mode interval flush_interval 1s buffer_chunk_limit 8m time_key time time_key time time_format %Y-%m-%d %H:%M:%S.%L is not used.

上面說flush_mode并沒有起作用。

總結(jié)

以上就是這篇文章的全部內(nèi)容了，希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，如果有疑問大家可以留言交流，謝謝大家對(duì)創(chuàng)新互聯(lián)的支持。

參考文檔：

• https://docs.treasuredata.com/articles/td-agent
• https://docs.docker.com/engine/admin/logging/fluentd/
• https://docs.fluentd.org/v1.0/articles/out_mongo