這篇文章主要介紹“Docker容器的日志如何處理”的相關(guān)知識(shí),小編通過實(shí)際案例向大家展示操作過程,操作方法簡單快捷,實(shí)用性強(qiáng),希望這篇“Docker容器的日志如何處理”文章能幫助大家解決問題。
利川ssl適用于網(wǎng)站、小程序/APP、API接口等需要進(jìn)行數(shù)據(jù)傳輸應(yīng)用場(chǎng)景,ssl證書未來市場(chǎng)廣闊!成為創(chuàng)新互聯(lián)建站的ssl證書銷售渠道,可以享受市場(chǎng)價(jià)格4-6折優(yōu)惠!如果有意向歡迎電話聯(lián)系或者加微信:028-86922220(備注:SSL證書合作)期待與您的合作!
docker有很多的日志插件,默認(rèn)使用 json-file,只有使用json-file時(shí),sudo docker logs -f 才可以顯示,輸入以下命令查看docker日志插件:
$ sudo docker info | grep logging
這里先說明一下,當(dāng)容器運(yùn)行時(shí),docker會(huì)在宿主機(jī)上創(chuàng)建一個(gè)該容器相關(guān)的文件,然后將容器產(chǎn)生的日志轉(zhuǎn)存到該文件下。docker logs -f 命令就會(huì)找到該文件內(nèi)容并顯示在終端上。
我們都知道docker logs -f會(huì)將所有對(duì)應(yīng)的服務(wù)日志輸出到終端,無論服務(wù)的部署在哪個(gè)節(jié)點(diǎn)上,那么我現(xiàn)在提出一個(gè)問題,是否每個(gè)節(jié)點(diǎn)對(duì)應(yīng)的容器文件,都會(huì)保存該服務(wù)的完整日志備份,還是只保存該節(jié)點(diǎn)服務(wù)對(duì)應(yīng)容器產(chǎn)生的日志?
因?yàn)檫@個(gè)問題涉及到每個(gè)節(jié)點(diǎn)如果都用filebeat監(jiān)聽宿主機(jī)的容器日志文件,那么如果每個(gè)節(jié)點(diǎn)的容器日志都是一個(gè)完整的備份,日志就會(huì)重復(fù),如果只是保存該節(jié)點(diǎn)上容器的日志,就不會(huì)。
答案是只保留該節(jié)點(diǎn)上容器的日志,docker logs -f 命令只不過在overlay網(wǎng)絡(luò)模型上走了一層協(xié)議,把在其它節(jié)點(diǎn)上的相同的容器日志匯聚起來。
默認(rèn)使用docker的json-file,首先配置daemon:
$ sudo dockerd \ --log-driver=json-file \ --log-opt labels=servicename
啟動(dòng)容器需要添加如下參數(shù):
$ sudo docker service update --label servicename=test
或者直接在docker-compose.yml中標(biāo)記:
version: "3" services: go-gin-demo: image: chenghuizhang/go-gin-demo:v3 ports: - 8081:8081 networks: - overlay deploy: mode: replicated replicas: 3 labels: servicename: go-gin-demoxxxxxxx logging: options: labels: "servicename" networks: overlay:
在每個(gè)節(jié)點(diǎn)安裝filebeat,并且filebeat.yml配置如下:
filebeat.prospectors: - type: log paths: # 容器的日志目錄 - /var/lib/docker/containers/*/*.log # 因?yàn)閐ocker使用的log driver是json-file,因此采集到的日志格式是json格式,設(shè)置為true之后,filebeat會(huì)將日志進(jìn)行json_decode處理 json.keys_under_root: true tail_files: true output.logstash: hosts: ["172.17.10.114:5044"]
在logstash.conf中配置索引:
output { elasticsearch { action => "index" hosts => ["172.17.10.114:9200"] # 獲取日志label index => "%{attrs.servicename}-%{+yyyy.mm.dd}" } }
dockerfile文件需要將項(xiàng)目輸出的日志打印到stdout和stderr中,不然json-file日志驅(qū)動(dòng)不會(huì)收集到容器里面輸出的日志,sudo docker logs -f就在終端顯示不了容器日志了,在dockerfile中需加入以下命令:
run ln -sf /dev/stdout /xx/xx.log \ # info && ln -sf /dev/stderr /xx/xx.log # error
或者在在項(xiàng)目的log4j配置輸出控制臺(tái):
如果日志需要記錄容器id名稱和鏡像名稱,在運(yùn)行容器時(shí)可以加入以下參數(shù):
--log-opt tag="http://"
最終,json-file日志插件將容器打印到控制臺(tái)的日志生成到本地 /var/lib/docker/containers/*/
目錄中,格式如下:
{ "log":"[gin-debug] [warning] now gin requires go 1.6 or later and go 1.7 will be required soon.", "stream":"stderr", "attrs":{ "tag":"chenghuizhang/go-gin-demo:v3@sha256:e6c0419d64e5eda510056a38cfb803750e4ac2f0f4862d153f7c4501f576798b/mygo.2.jhqptjugfti2t4emf55sehamo/647eaa4b3913", "servicename":"test" }, "time":"2019-01-29t10:08:59.780161908z" }
在logstash中格式化日志:
filter { grok { patterns_dir => "/etc/logstash/conf.d/patterns" match => {"message" => "%{timestamp_iso8601:time}%{servicename:attr.servicename}%{docker_tag:attr.tag}"} }
關(guān)于“Docker容器的日志如何處理”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí),可以關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,小編每天都會(huì)為大家更新不同的知識(shí)點(diǎn)。