[發(fā)明專利]基于Fluentd的容器日志搜集方法、系統(tǒng)及存儲(chǔ)介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010595419.1
• 申請日: 2020-06-23
• 公開（公告）號: CN111782465A
• 公開（公告）日: 2020-10-16
• 發(fā)明（設(shè)計(jì)）人: 王曉亮;繆俊
• 申請（專利權(quán)）人: 杭州溪塔科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 北京德崇智捷知識產(chǎn)權(quán)代理有限公司 11467
• 代理人: 王欣

1.一種基于Fluentd的容器日志搜集方法，包括：

采用Fluentd采集集群的所有節(jié)點(diǎn)的docker上的容器日志；

對所述容器日志進(jìn)行結(jié)構(gòu)化解析；

存儲(chǔ)經(jīng)過結(jié)構(gòu)化解析的容器日志。

2.如權(quán)利要求1所述的容器日志搜集方法，對所述容器日志進(jìn)行結(jié)構(gòu)化解析之前，所述方法，還包括：

對所述容器日志進(jìn)行緩沖處理。

3.如權(quán)利要求1或2所述的容器日志搜集方法，所述存儲(chǔ)經(jīng)過結(jié)構(gòu)化解析的容器日志之后，所述方法，還包括：

展示已存儲(chǔ)的容器日志。

4.如權(quán)利要求3所述的容器日志搜集方法，采用Fluentd采集集群的所有節(jié)點(diǎn)的docker上的容器日志，具體包括：

從所述容器日志的文末讀取所述容器日志的內(nèi)容；

將讀取的容器日志封裝為Fluentd事件，所述Fluentd事件至少包括標(biāo)簽；

對所述Fluentd事件進(jìn)行過濾處理；

基于所述標(biāo)簽將經(jīng)過過濾處理的所述Fluentd事件進(jìn)行對應(yīng)的輸出處理。

5.如權(quán)利要求3所述的容器日志搜集方法，對所述容器日志進(jìn)行結(jié)構(gòu)化解析，具體包括：

采用Logstash對所述容器日志進(jìn)行日志整理，形成結(jié)構(gòu)化日志數(shù)據(jù)。

6.如權(quán)利要求3所述的容器日志搜集方法，所述存儲(chǔ)經(jīng)過結(jié)構(gòu)化解析的容器日志，具體包括：

利用ElasticSearch對結(jié)構(gòu)化日志數(shù)據(jù)進(jìn)行分片歸檔；

獲取所述結(jié)構(gòu)化日志數(shù)據(jù)的歸檔位置；

建立所述結(jié)構(gòu)化日志數(shù)據(jù)和所述歸檔位置的索引。

7.如權(quán)利要求6所述的容器日志搜集方法，展示已存儲(chǔ)的容器日志，具體包括：

根據(jù)所述索引讀取所述結(jié)構(gòu)化日志數(shù)據(jù)；

形成檢索界面。

8.一種基于Fluentd的容器日志搜集系統(tǒng)，包括：

日志采集模塊，用于采用Fluentd采集集群的所有節(jié)點(diǎn)的docker上的容器日志；

日志解析模塊，用于對所述容器日志進(jìn)行結(jié)構(gòu)化解析；

日志存儲(chǔ)模塊，用于存儲(chǔ)經(jīng)過結(jié)構(gòu)化解析的容器日志。

9.如權(quán)利要求8所述的容器日志搜集系統(tǒng)，還包括日志緩沖模塊，用于：

對所述容器日志進(jìn)行緩沖處理。

10.如權(quán)利要求8或9所述的容器日志搜集系統(tǒng)，還包括日志展示模塊，用于：

展示已存儲(chǔ)的容器日志。

11.一種存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被一個(gè)或多個(gè)處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述的容器日志搜集方法的步驟。