[發明專利]一種集群日志的收集方法與系統

在審

• 申請號: 201811231246.4
• 申請日: 2018-10-22
• 公開（公告）號: CN109471746A
• 公開（公告）日: 2019-03-15
• 發明（設計）人: 安祥文
• 申請（專利權）人: 鄭州云海信息技術有限公司
• 主分類號: G06F11/07
• 分類號: G06F11/07
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 王寶筠

本申請提供了一種集群日志的收集方法，所述方法包括：在分布式存儲集群節點中配置SaltStack并搭建SaltStack的文件服務器；選擇主節點，并向選定的從節點發送傳輸文件指令；所述主節點接收所述從節點傳輸的相關日志文件。利用本申請提供的方法，能夠精準快速的對選定節點的日志文件進行收集，提高了集群日志收集的效率。本申請還提供了一種集群日志的收集系統。

技術領域

本發明涉及數據收集技術領域，尤其涉及一種集群日志的收集方法與系統。

背景技術

分布式存儲系統是建立在網絡之上的軟件系統，分布式存儲系統具有高度的內聚性和透明性，隨著海量數據的產生，分布式存儲系統的應用越來越廣泛。

分布式存儲系統通常是以集群的形式組網，一般采用幾個、幾十個、甚至幾百上千服務器節點來組成。當分布式存儲系統中出現故障時就需要對該集群中節點的日志進行分析，但由于分布式系統的集群規模越來越來大，怎樣將這些日志精準而快速的收集起來以便進行集中處理成了一個亟待解決的問題。

發明內容

為了解決現有技術存在的上述技術問題，本申請提供了一種集群日志的收集方法與系統，能夠精準快速的對選定節點的日志文件進行收集，提高了集群日志收集的效率。

本申請提供了一種集群日志的收集方法，所述方法包括：

在分布式存儲集群節點中配置SaltStack并搭建SaltStack的文件服務器；

選擇主節點，并向選定的從節點發送傳輸文件指令；

所述主節點接收所述從節點傳輸的相關日志文件。

可選的，所述選擇主節點，并向選定的從節點發送傳輸文件指令，具體為：

選擇主節點，并發向所有選定的從節點發送傳輸文件指令。

可選的，所述方法還包括：

所述主節點在指定目錄下接收所述從節點傳輸的所述日志文件。

可選的，所述方法還包括：

所述主節點接收所述日志文件后，對所述日志文件進行歸類與打包。

可選的，所述日志文件，至少包括以下其中的一種：

軟件日志文件、硬件日志文件和系統日志文件。

本申請實施例還提供了一種集群日志的收集系統，所述系統包括：節點配置單元、指令傳輸單元和日志收集單元；

所述節點配置單元，用于在分布式存儲集群節點中配置SaltStack并搭建SaltStack的文件服務器；

所述指令傳輸單元，用于選擇主節點，并向選定的從節點發送傳輸文件指令；

所述日志傳輸單元，用于所述主節點接收所述從節點傳輸的相關日志文件。

可選的，所述所述指令傳輸單元，用于選擇主節點，并向選定的從節點發送傳輸文件指令，具體為：

所述指令傳輸單元，用于選擇主節點，并發向所有選定的從節點發送傳輸文件指令。

可選的，所述日志傳輸單元，還用于所述主節點在指定目錄下接收所述從節點傳輸的所述日志文件。

可選的，所述裝置還包括：日志處理單元；

所述日志處理單元，用于所述主節點接收所述日志文件后，對所述日志文件進行歸類與打包。

可選的，所述日志文件，至少包括以下其中的一種：

軟件日志文件、硬件日志文件和系統日志文件。