[發明專利]一種高性能元數據日志文件管理方法、系統、介質及終端

在審

• 申請號: 202010843131.1
• 申請日: 2020-08-20
• 公開（公告）號: CN111984598A
• 公開（公告）日: 2020-11-24
• 發明（設計）人: 劉勝金
• 申請（專利權）人: 重慶紫光華山智安科技有限公司
• 主分類號: G06F16/16
• 分類號: G06F16/16;G06F16/172;G06F16/18;G06F16/182
• 代理公司: 上海光華專利事務所(普通合伙) 31219
• 代理人: 代玲

1.一種高性能元數據日志文件管理方法，其特征在于，包括：

將數據與元數據設置于不同的文件系統；

記錄數據寫入時所有修改過程中的操作，并將其作為第一級過程元數據日志文件；

對所述第一級過程元數據日志文件中記錄的過程進行合并，獲取合并結果；

將所述合并結果進行記錄，將其作為第二級結果元數據日志文件；

根據所述第一級過程元數據日志文件和第二級結果元數據日志文件進行組合寫入，完成元數據日志文件的加載合并操作。

2.根據權利要求1所述的高性能元數據日志文件管理方法，其特征在于，通過第一文件系統對元數據日志文件進行管理，通過第二文件系統對數據文件進行管理，所述第一文件系統包括XFS文件系統。

3.根據權利要求1所述的高性能元數據日志文件管理方法，其特征在于，對所述第一級元數據日志文件中記錄的過程進行合并后，還包括：

檢查是否存在第二級結果元數據日志中間文件，如果存在，則判定合并過程未完成；如果存在，在判定合并過程完成。

4.根據權利要求3所述的高性能元數據日志文件管理方法，其特征在于，

當判定合并過程未完成時，將原第二級結果元數據日志文件刪除，并將所述第二級結果元數據日志中間文件重命名為第二級結果元數據日志文件；

加載重命名后的第二級結果元數據日志文件，并對其進行解析，加至內存哈希表中；

加載第一級元數據日志中間文件，并對其進行解析，獲取第二級結果元數據日志文件所在哈希表中的節點，

對節點信息進行基本操作，所述基本操作包括數據節點信息的創建、修改和刪除；

將哈希表中的記錄轉換為基本數據寫入第二級結果元數據日志中間文件中，完成第一級元數據日志中間文件的合并。

5.根據權利要求4所述的高性能元數據日志文件管理方法，其特征在于，刪除合并后的第一級元數據日志中間文件，以及原第二級結果元數據日志文件，并將第二級結果元數據日志中間文件重命名為第二級結果元數據日志文件。

6.根據權利要求4所述的高性能元數據日志文件管理方法，其特征在于，當所述第一級過程元數據日志文件的大小達到預設的閾值時，將其重命名為一第一級元數據日志中間文件并重新打開一新的第一級過程元數據日志文件。

7.根據權利要求1所述的高性能元數據日志文件管理方法，其特征在于，將磁盤劃分為至少兩個分區，其中一分區為用于存儲元數據文件的元數據分區，其他分區為用于存儲數據的數據分區，并將所述元數據分區格式化為XFS文件系統。

8.一種高性能元數據日志文件管理系統，其特征在于，包括：

磁盤管理單元，用于對磁盤的分區管理，將數據與元數據設置于不同的文件系統；

日志流程單元，用于記錄數據寫入時所有修改過程中的操作，并將其作為第一級過程元數據日志文件；對所述第一級過程元數據日志文件中記錄的過程進行合并，獲取合并結果；將所述合并結果進行記錄，將其作為第二級結果元數據日志文件；

日志控制單元，用于根據所述第一級過程元數據日志文件和第二級結果元數據日志文件進行組合寫入，完成元數據日志文件的加載合并操作。

9.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于：該程序被處理器執行時實現權利要求1至8中任一項所述方法。

10.一種電子終端，其特征在于，包括：處理器及存儲器；

所述存儲器用于存儲計算機程序，所述處理器用于執行所述存儲器存儲的計算機程序，以使所述終端執行如權利要求1至8中任一項所述方法。