[發(fā)明專利]數(shù)據(jù)緩存方法、裝置、設備及存儲介質

有效

• 申請?zhí)枺?/td>: 202011607295.0
• 申請日: 2020-12-29
• 公開（公告）號: CN112698789B
• 公開（公告）日: 2022-03-15
• 發(fā)明（設計）人: 邱龍金;趙勇;王子駿;馬立珂
• 申請（專利權）人: 廣州鼎甲計算機科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F11/14
• 代理公司: 華進聯(lián)合專利商標代理有限公司 44224
• 代理人: 盧曉霞

1.一種數(shù)據(jù)緩存方法，其特征在于，所述方法包括：

將磁盤文件中的備份數(shù)據(jù)備份至備份服務器的過程中，產(chǎn)生的增量數(shù)據(jù)包添加至增量發(fā)送隊列中；所述增量數(shù)據(jù)包表示所述備份數(shù)據(jù)的變化數(shù)據(jù)；

若所述增量發(fā)送隊列的數(shù)據(jù)量大于或等于預設的第一數(shù)據(jù)量閾值，則從磁盤的寫輸入輸出包中獲取元數(shù)據(jù)，并將所述元數(shù)據(jù)存儲至增量元數(shù)據(jù)隊列中；若所述增量元數(shù)據(jù)隊列的數(shù)據(jù)量大于或等于預設的第二數(shù)據(jù)量閾值，則根據(jù)所述備份數(shù)據(jù)的變化數(shù)據(jù)生成變化數(shù)據(jù)位圖，并將所述變化數(shù)據(jù)位圖存儲至內存映射文件中；

在所述增量發(fā)送隊列存在空余空間的情況下，根據(jù)所述元數(shù)據(jù)和所述變化數(shù)據(jù)位圖獲取對應的目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中。

2.根據(jù)權利要求1所述的方法，其特征在于，所述根據(jù)所述元數(shù)據(jù)和所述變化數(shù)據(jù)位圖獲取對應的目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中，包括：

根據(jù)所述元數(shù)據(jù)從對應的備份數(shù)據(jù)中獲取所述目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中；所述元數(shù)據(jù)包括輸入輸出包寫入的時間戳、磁盤名、在磁盤中的偏移以及變化數(shù)據(jù)的長度；

若所述增量元數(shù)據(jù)隊列的數(shù)據(jù)量大于或等于預設的第二數(shù)據(jù)量閾值，則根據(jù)所述變化數(shù)據(jù)位圖獲取所述目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中。

3.根據(jù)權利要求2所述的方法，其特征在于，所述根據(jù)所述變化數(shù)據(jù)位圖獲取所述目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中，包括：

在所述增量元數(shù)據(jù)隊列為空的情況下，調用CBT處理線程根據(jù)所述變化數(shù)據(jù)位圖的有效數(shù)據(jù)位從所述備份數(shù)據(jù)中獲取所述目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中；所述CBT處理線程為數(shù)據(jù)塊修改跟蹤處理線程，并用于跟蹤變化數(shù)據(jù)。

4.根據(jù)權利要求3所述的方法，其特征在于，所述方法還包括：

若所述增量元數(shù)據(jù)隊列的數(shù)據(jù)量小于所述第二數(shù)據(jù)量閾值，則獲取新的元數(shù)據(jù)，并將所述新的元數(shù)據(jù)存儲至臨時緩存隊列中；所述新的元數(shù)據(jù)為所述CBT處理線程執(zhí)行期間備份數(shù)據(jù)產(chǎn)生的元數(shù)據(jù)；

若所述CBT處理線程執(zhí)行完畢，則將所述臨時緩存隊列中的新的元數(shù)據(jù)添加至所述增量元數(shù)據(jù)隊列。

5.根據(jù)權利要求4所述的方法，其特征在于，所述方法還包括：

若所述CBT處理線程執(zhí)行完畢，則釋放所述內存映射文件對應的存儲資源。

6.根據(jù)權利要求2所述的方法，其特征在于，所述方法還包括：

若所述增量發(fā)送隊列的數(shù)據(jù)量小于所述第一數(shù)據(jù)量閾值，且所述增量元數(shù)據(jù)隊列為空，則將當前獲取到的增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中。

7.一種數(shù)據(jù)緩存裝置，其特征在于，所述裝置包括：

第一添加模塊，用于將磁盤文件中的備份數(shù)據(jù)備份至備份服務器的過程中，產(chǎn)生的增量數(shù)據(jù)包添加至增量發(fā)送隊列中；所述增量數(shù)據(jù)包表示所述備份數(shù)據(jù)的變化數(shù)據(jù)；

存儲模塊，用于若所述增量發(fā)送隊列的數(shù)據(jù)量大于或等于預設的第一數(shù)據(jù)量閾值，則從磁盤的寫輸入輸出包中獲取元數(shù)據(jù)，并將所述元數(shù)據(jù)存儲至增量元數(shù)據(jù)隊列中；若所述增量元數(shù)據(jù)隊列的數(shù)據(jù)量大于或等于預設的第二數(shù)據(jù)量閾值，則根據(jù)所述備份數(shù)據(jù)的變化數(shù)據(jù)生成變化數(shù)據(jù)位圖，并將所述變化數(shù)據(jù)位圖存儲至內存映射文件中；

第二添加模塊，用于在所述增量發(fā)送隊列存在空余空間的情況下，根據(jù)所述元數(shù)據(jù)和所述變化數(shù)據(jù)位圖獲取對應的目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中。

8.根據(jù)權利要求7所述的裝置，其特征在于，所述第二添加模塊還用于根據(jù)所述元數(shù)據(jù)從對應的備份數(shù)據(jù)中獲取所述目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中；所述元數(shù)據(jù)包括輸入輸出包寫入的時間戳、磁盤名、在磁盤中的偏移以及變化數(shù)據(jù)的長度；若所述增量元數(shù)據(jù)隊列的數(shù)據(jù)量大于或等于預設的第二數(shù)據(jù)量閾值，則根據(jù)所述變化數(shù)據(jù)位圖獲取所述目標增量數(shù)據(jù)包，并將所述目標增量數(shù)據(jù)包添加至所述增量發(fā)送隊列中。