[發明專利]基于Fluentd的容器日志搜集方法、系統及存儲介質

在審

• 申請號: 202010595419.1
• 申請日: 2020-06-23
• 公開（公告）號: CN111782465A
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 王曉亮;繆俊
• 申請（專利權）人: 杭州溪塔科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 北京德崇智捷知識產權代理有限公司 11467
• 代理人: 王欣

本說明書一個或多個實施例公開了一種基于Fluentd的日志搜集方法、系統及存儲介質，該基于Fluentd的容器日志搜集方法，包括：采用Fluentd采集集群的所有節點的docker上的容器日志；對所述容器日志進行結構化解析；存儲經過結構化解析的容器日志，可以實時準確地搜集到容器日志。

技術領域

本文件涉及計算機技術領域，尤其涉及一種基于Fluentd的容器日志搜集方法、系統及存儲介質。

背景技術

隨著微服務架構的普及，越來越多的公司采用微服務來搭建自己的業務平臺并采用以Kubernetes為代表的容器集群平臺治理微服務，進行資源調度、動態擴縮容等一系列的容器編排操作。而日志作為記錄容器運行狀態的重要信息，在日常生產中用作診斷、定位問題的關鍵數據，能夠幫助問題的快速定位并快速解決。

而在容器集群中，當容器發生崩潰或者pod被驅逐等情況下，容器引擎或者runtime提供的原生功能通常不足以提供完整的日志記錄方案。特別地集群是分布式的，其服務和環境的彈性伸縮，不像傳統虛擬機環境下可以事先配置好日志的采集路徑等信息，對于日志的采集帶來了很大的困難，采集的動態性以及數據完整性是具有非常大的挑戰。如何能夠實時準確地搜集到日志，成為亟需解決的技術問題。

發明內容

本說明書一個或多個實施例的目的是提供一種基于Fluentd的容器日志搜集方法、系統及存儲介質，可以實時準確地搜集到日志。

為解決上述技術問題，本說明書一個或多個實施例是這樣實現的：

第一方面，提出了一種基于Fluentd的容器日志搜集方法，包括：采用Fluentd采集集群的所有節點的docker上的容器日志；對所述容器日志進行結構化解析；存儲經過結構化解析的容器日志。

第二方面，提出了一種基于Fluentd的容器日志搜集系統，包括：日志采集模塊，用于采用Fluentd采集集群的所有節點的docker上的容器日志；日志解析模塊，用于對所述容器日志進行結構化解析；存儲模塊，用于存儲經過結構化解析的容器日志。

第三方面，提出了一種存儲介質，其上存儲有計算機程序，所述計算機程序被一個或多個處理器執行時實現如上文所述的容器日志搜集方法的步驟。

由以上本說明書一個或多個實施例提供的技術方案可見，該基于Fluentd的容器日志搜集方法通過采用Fluentd采集集群的所有節點的docker上的容器日志，可以適用于容器集群不管容器分布在什么位置都能夠基于Fluentd實時采集docker上的容器日志，然后對容器日志進行結構化解析，丟棄無用的信息，存儲經過結構化解析的容器日志，便于后續需要定位或者追溯問題時能夠快速查找到對應的容器日志，加快問題的解決，可以很好地適應分布式集群彈性伸縮的服務和環境。

附圖說明

為了更清楚地說明本說明書一個或多個實施例或現有技術中的技術方案，下面將對一個或多個實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本說明書中記載的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動性的前提下，還可以根據這些附圖獲得其他的附圖。

圖1是本說明書實施例所涉及的一種容器日志搜集方法的步驟示意圖。

圖2是本說明書實施例提供的另一種容器日志搜集方法的步驟示意圖。

圖3是本說明書實施例提供的又一種容器日志搜集方法的步驟示意圖。

圖4是本說明書實施例提供的又一種容器日志搜集方法的步驟示意圖。

圖5是本說明書實施例提供的又一種容器日志搜集方法的步驟示意圖。

圖6是本說明書實施例提供的又一種容器日志搜集方法的步驟示意圖。