[發明專利]一種日志的存儲方法、裝置及計算機系統

有效

• 申請號: 202011159844.2
• 申請日: 2020-10-27
• 公開（公告）號: CN112035425B
• 公開（公告）日: 2021-11-09
• 發明（設計）人: 耿志亮;包玉雪;陳旭;徐欣
• 申請（專利權）人: 南京星云數字技術有限公司
• 主分類號: G06F16/18
• 分類號: G06F16/18;G06F16/11
• 代理公司: 北京市萬慧達律師事務所 11111
• 代理人: 段曉玲

1.一種日志的存儲方法，其特征在于，所述方法包括：

使用Flume日志采集系統獲取預設業務平臺產生的預設格式的待處理日志及所述預設業務平臺對應的配置數據，所述待處理日志包括鍵值對及預設標識，所述鍵值對用于存儲所述預設業務平臺的歷史運行記錄，所述配置數據包括每一數據鍵對應的含義、預設數據鍵對應的替換規則及每一所述預設標識對應的索引庫地址；

使用Flink流式計算引擎解析所述待處理日志，識別所述待處理日志包括的數據鍵及對應的數據值；

當包括的數據鍵對包含預設數據鍵時，根據對應的替換規則修改包括的預設數據鍵對應的數據值；

根據每一數據鍵對應的含義及對應的數據值，生成歷史運行記錄；

將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址，

其中，所述將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址包括：

向所述索引庫地址對應的預設系統發送數據存儲請求，以便所述預設系統根據所述數據存儲請求返回數據訪問權限；

當接收到返回的數據訪問權限時，將所述歷史運行記錄存儲至所述索引庫地址。

2.根據權利要求1所述的方法，其特征在于，所述方法包括：

接收用戶發送的日志讀取請求；

根據所述日志讀取請求對應的歷史運行記錄，生成可視化日志；

將所述可視化日志返回給所述用戶。

3.根據權利要求1所述的方法，其特征在于，所述待處理日志為Json格式。

4.一種日志的存儲方法，其特征在于，所述方法包括：

將產生的待處理日志發送至預設處理端，以便所述預設處理端接收待處理日志及獲取對應的配置數據，所述待處理日志包括鍵值對及預設標識，所述鍵值對用于存儲預設業務平臺的歷史運行記錄，所述配置數據包括每一數據鍵對應的含義、預設數據鍵對應的替換規則及每一所述預設標識對應的索引庫地址；解析所述待處理日志，識別所述待處理日志包括的數據鍵及對應的數據值；當包括的數據鍵對包含預設數據鍵時，根據對應的替換規則修改包括的預設數據鍵對應的數據值；將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址，其中，所述將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址包括：

向所述索引庫地址對應的預設系統發送數據存儲請求，以便所述預設系統根據所述數據存儲請求返回數據訪問權限；

當接收到返回的數據訪問權限時，將所述歷史運行記錄存儲至所述索引庫地址。

5.一種日志的存儲裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取預設業務平臺產生的預設格式的待處理日志及所述預設業務平臺對應的配置數據，所述待處理日志包括鍵值對及預設標識，所述鍵值對用于存儲所述預設業務平臺的歷史運行記錄，所述配置數據包括每一數據鍵對應的含義、預設數據鍵對應的替換規則及每一所述預設標識對應的索引庫地址；

解析模塊，用于解析所述待處理日志，識別所述待處理日志包括的數據鍵及對應的數據值；當所述包括的數據鍵對包括預設數據鍵時，根據對應的替換規則修改包括的預設數據鍵對應的數據值；根據每一數據鍵對應的含義及對應的數據值，生成歷史運行記錄；

存儲模塊，用于將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址，所述存儲模塊還用于向所述索引庫地址對應的預設系統發送數據存儲請求，以便所述預設系統根據所述數據存儲請求返回數據訪問權限；當接收到返回的數據訪問權限時，將所述歷史運行記錄存儲至所述索引庫地址。

6.一種計算機系統，其特征在于，所述系統包括：

一個或多個處理器；

以及與所述一個或多個處理器關聯的存儲器，所述存儲器用于存儲程序指令,所述程序指令在被所述一個或多個處理器讀取執行時，執行如下操作：

獲取預設業務平臺產生的預設格式的待處理日志及所述預設業務平臺對應的配置數據，所述待處理日志包括鍵值對及預設標識，所述鍵值對用于存儲所述預設業務平臺的歷史運行記錄，所述配置數據包括每一數據鍵對應的含義、預設數據鍵對應的替換規則及每一所述預設標識對應的索引庫地址；

解析所述待處理日志，識別所述待處理日志包括的數據鍵及對應的數據值；

當包括的數據鍵對包含預設數據鍵時，根據對應的替換規則修改包括的預設數據鍵對應的數據值；

根據每一數據鍵對應的含義及對應的數據值，生成歷史運行記錄；

將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址，

其中，所述將所述歷史運行記錄存儲至所述預設標識對應的索引庫地址包括：

向所述索引庫地址對應的預設系統發送數據存儲請求，以便所述預設系統根據所述數據存儲請求返回數據訪問權限；

當接收到返回的數據訪問權限時，將所述歷史運行記錄存儲至所述索引庫地址。