[發明專利]一種基于命令模式的分布式日志訪問方法及系統

在審

• 申請號: 202010619387.4
• 申請日: 2020-06-30
• 公開（公告）號: CN111782475A
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 黃凱
• 申請（專利權）人: 北京思特奇信息技術股份有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F16/901;H04L29/06;H04L29/08
• 代理公司: 北京輕創知識產權代理有限公司 11212
• 代理人: 賴定珍

本發明公開了一種基于命令模式的分布式日志訪問方法，包括：步驟1、獲取分布式日志中心的數據，并將所述數據索引至日志收集集群中；步驟2、接收由日志收集網絡接口輸入的命令執行數據；步驟3、根據所述命令執行數據將所述日志收集集群中的與所述命令執行數據對應的內容通過所述日志收集網絡接口輸出，本方法適用于數據處理領域，且通過將數據存儲至日志收集集群中可以提高工作的效率節約時間。

技術領域

本發明涉及數據處理領域，尤其涉及一種基于命令模式的分布式日志訪問方法及系統。

背景技術

現有的對于云化、容器化之前的系統積累的基于命令行模式下的日志運維工具無法在新的架構下產生生產力，并且多次登錄查看日志使得系統的工作量大幅度增加同時也浪費了更多的時間，此外，現有技術中并沒有利用原有技術儲備和提高生產力的方法，也不存在通過Unix/Linx類系統的管道組合系統命令模式進行對日志數據的二次分析與處理。

發明內容

本發明所要解決的技術問題是針對現有技術的不足，提供一種基于命令模式的分布式日志訪問方法。

本發明解決上述技術問題的技術方案如下：一種基于命令模式的分布式日志訪問方法，包括：

步驟1、獲取分布式日志中心的數據，并將所述數據索引至日志收集集群中；

步驟2、接收由日志收集網絡接口輸入的命令執行數據；

步驟3、根據所述命令執行數據將所述日志收集集群中的與所述命令執行數據對應的內容通過所述日志收集網絡接口輸出。

本發明的有益效果是：將系統日志通過采集和格式轉化，集中存儲在ElasticSearch集群上，通過控制臺程序進行命令行訪問日志，方便使用與部署，還能對原有非云化、非容器化前的命令行日志運維工具再次使用，節約成本、提高勞動生產力同時還可以提高工作效率。

在上述技術方案的基礎上，本發明還可以做如下改進。

進一步，所述分布式日志中心的數據包括：

主機的名稱、ID、用戶名、路徑、日志名、截獲取的時間。

采用上述進一步方案的有益效果是：全面獲取數據信息可以提高最終索引的準確性，同時也保證了數據的完整性。

進一步，將所述數據索引至日志收集集群中，具體為：

將所述數據封裝至日志信息對象中，并將所述日志信息對象發送至消息中間件，分布式日志中心的實時數據流分析系統從所述中間件上獲取所述數據，并將所述數據進行格式分解，將分解后的結果索引后寫入所述日志收集集群中。

采用上述進一步方案的有益效果是：對數據格式進行分解便于后續的索引的建立，同時也提高了獲取對應數據時的效率，縮短了時間成本。

進一步，所述命令執行數據具體為：

由一個或多個所述命令執行數據組成的數據包，并在所述數據包中存入與所述日志收集網絡接口對應的加密數據。

采用上述進一步方案的有益效果是：將數據組成數據包可以避免中途混入其他的命令執行數據，另外數據包中存入加密數據也是為了數據安全同時可以保證輸入輸出對應，不會出現傳輸錯誤，提高了傳輸過程的安全性。

進一步，步驟3之后還包括：

步驟4、將輸出的結果通過管道保存至本地文本文件中或將輸出的結果通過管道進行二次過濾。

本發明解決上述技術問題的另一種技術方案如下：一種基于命令模式的分布式日志訪問系統，包括：

獲取模塊、用于獲取分布式日志中心的數據，并將所述數據索引至日志收集集群中；