[發明專利]日志歸檔方法、電子裝置及可讀存儲介質

在審

• 申請號: 201810259905.9
• 申請日: 2018-03-27
• 公開（公告）號: CN108874639A
• 公開（公告）日: 2018-11-23
• 發明（設計）人: 陳俊峰
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34
• 代理公司: 深圳市沃德知識產權代理事務所(普通合伙) 44347
• 代理人: 于志光;郭夢霞

本發明涉及一種日志歸檔方法、電子裝置及可讀存儲介質，該方法包括：讀取預設應用程序中待歸檔的日志數據，并將日志數據存儲至對應的預設緩存中；當滿足預設的流式壓縮條件時，按預設規則設定目標存儲路徑，并基于預設的支持數據追加的壓縮算法將預設緩存中的日志數據寫入對應的目標存儲路徑；預設的支持數據追加的壓縮算法包括SNAPPY壓縮算法、LZ4壓縮算法、ZIP壓縮算法中的至少一個。本發明無需針對不同業務系統做定制開發，實現日志歸檔的通用性較強，而且，當達到預設的流式壓縮條件時，可基于預設的支持數據追加的壓縮算法將待歸檔的日志數據直接寫入對應的目標存儲路徑，無需歸檔日志數據的備份，避免了多重備份的問題，節約存儲空間。

技術領域

本發明涉及計算機技術領域，尤其涉及一種日志歸檔方法、電子裝置及可讀存儲介質。

背景技術

現有的日志處理軟件主要分為兩類，一類是以Storm和Spark Streaming為代表的實時處理框架，需要對業務系統做定制開發，往往開發周期較長，所有功能需要重新開發，通用性不強。另一類是商用專業日志處理產品如Splunk在處理日志文件時自帶備份功能，歸檔時無法只歸檔一份數據，而是把多個備份都進行歸檔，會造成存儲空間的浪費。

發明內容

本發明的目的在于提供一種日志歸檔方法、電子裝置及可讀存儲介質，旨在實現日志的通用性歸檔，并避免多重備份的問題。

為實現上述目的，本發明提供一種電子裝置，所述電子裝置包括存儲器、處理器，所述存儲器上存儲有可在所述處理器上運行的日志歸檔系統，所述日志歸檔系統被所述處理器執行時實現如下步驟：

讀取預設應用程序中待歸檔的日志數據，并將所述日志數據存儲至對應的預設緩存中；

當滿足預設的流式壓縮條件時，按預設規則設定目標存儲路徑，并基于預設的支持數據追加的壓縮算法將所述預設緩存中的日志數據寫入對應的目標存儲路徑；其中，所述預設的支持數據追加的壓縮算法包括SNAPPY壓縮算法、LZ4壓縮算法、ZIP壓縮算法中的至少一個。

優選地，所述基于預設的支持數據追加的壓縮算法將所述預設緩存中的日志數據寫入對應的目標存儲路徑包括：

生成并顯示壓縮方式選擇界面，所述壓縮方式選擇界面中包括快速壓縮選項、主流格式壓縮選項及通用壓縮選項；

若用戶在所述壓縮方式選擇界面上選中快速壓縮選項，則利用LZ4壓縮算法將所述預設緩存中的日志數據寫入對應的目標存儲路徑；

若用戶在所述壓縮方式選擇界面上選中主流格式壓縮選項，則利用ZIP壓縮算法將所述預設緩存中的日志數據寫入對應的目標存儲路徑；

若用戶在所述壓縮方式選擇界面上選中通用壓縮選項，則利用SNAPPY壓縮算法將所述預設緩存中的日志數據寫入對應的目標存儲路徑。

優選地，所述基于預設的支持數據追加的壓縮算法將所述預設緩存中的日志數據寫入對應的目標存儲路徑包括：

若所述目標存儲路徑中不存在文件，則基于預設的支持數據追加的壓縮算法對所述預設緩存中的日志數據進行壓縮，形成所述目標存儲路徑中的新文件；

若所述目標存儲路徑中已存在壓縮文件，則基于預設的支持數據追加的壓縮算法將所述預設緩存中的日志數據直接壓縮寫入所述目標存儲路徑中已存在的壓縮文件中。

優選地，所述按預設規則設定目標存儲路徑包括：

按照壓縮時間、預設應用程序所在的機器名和/或所述日志數據的數據類型來命名生成路徑名，并將生成的路徑名作為目標存儲路徑。

此外，為實現上述目的，本發明還提供一種日志歸檔方法，所述日志歸檔方法包括：

讀取預設應用程序中待歸檔的日志數據，并將所述日志數據存儲至對應的預設緩存中；