如何使用MongoDB存儲Docker日志!
日志是系統(tǒng)很重要的一個組成部分,通過日志可以及時發(fā)現(xiàn)系統(tǒng)中存在的問題,也可以為修復問題提供線索。Docker提供了多種插件方式管理日志,本文就對使用MongoDB存儲Docker日志的過程做個記錄。
數(shù)據流
Docker產生的日期 發(fā)送到 FluentD,然后FluentD在轉存到MongoDB。
配置Fluentd
前提:操作系統(tǒng)是CentOS7,已安裝MongoDB3.4
1.安裝Fluentd
CentOS 7的軟件庫并沒有包含F(xiàn)luentd的安裝包,所以需要手動安裝。在CentOS使用的軟件td-agent。
上面命令會在/etct/yum.repo.d/目錄中,創(chuàng)建一個td-agent的安裝庫 td.repo,然后自動安裝td-agent。安裝完畢后設為自動啟動。
如果在啟動過程中出現(xiàn)問題,可以查看位于/var/log/td-agent/下日志文件td-agent.log
2. 配置將docker日志轉存到MongoDB
轉存到MongoDB需要插件支持,但是默認情況下td-agent是沒有安裝該插件的,需要安裝。
編輯/etc/td-agent/td-agent.conf,增加
重啟td-agent。
3.啟動容器
啟動容器的命令改為:
運行完畢后,可以到MongoDB中查看日志。
解決寫入延遲
上面我們完成了Docker + Fluentd + MongoDB的基本配置。但是在實際的使用過程中,卻發(fā)現(xiàn)Docker生成的日志并不會立即寫入到MongoDB中,有大概1分鐘左右的延遲。
查閱Fluentd的文檔得知,有一個flush參數(shù)可以控制日志的寫入頻率,默認的是60s。更改flush_interval參數(shù)就可以提高寫入頻率,具體更改如下:
剛開始對文檔理解不太透徹,增加了flush_interval參數(shù)后,并沒有發(fā)揮作用,***次更改時,并沒有將flush_mode和flush_interval放在buffer結構中。也就是:
從日志中也可以看出上面的配置,并沒有發(fā)揮作用:
上面說flush_mode并沒有起作用。
好了,操作步驟以及實際案例就介紹到這里,希望今天的內容對你所幫助!