[發明專利]基于共享SST文件的增量備份、恢復方法和系統

有效

• 申請號: 202211612061.4
• 申請日: 2022-12-15
• 公開（公告）號: CN115617580B
• 公開（公告）日: 2023-03-28
• 發明（設計）人: 宋鵬威;王玉玨;葉小萌
• 申請（專利權）人: 杭州歐若數網科技有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14
• 代理公司: 杭州創智卓英知識產權代理事務所(普通合伙) 33324
• 代理人: 朱秀琴

1.一種基于共享SST文件的增量備份恢復方法，其特征在于，所述方法包括：

備份流程，包括：獲取數據庫中待執行的本地文件，其中，所述數據庫采用LSM樹架構，所述本地文件包括寫前日志和多個SST文件，

確定備份任務對應的備份組，在所述備份組中，獲取已經保存的歷次備份產生的SST文件的集合，其中，所述SST文件是LSM 樹中的主要數據存儲文件，形式為有序鍵值對集合，以及

根據所述SST文件的唯一標識名，判斷所述本地文件中的各個SST文件，是否已存儲在所述SST文件集合中，若是，將其記為現有SST文件，若否，將其記為新增SST文件，以及

上傳所述寫前日志和所述新增SST文件至所述備份組，并對各個現有SST文件創建對應的link文件，將所述link文件上傳至所述備份組；

恢復流程，包括：獲取所述備份組的網絡地址，根據所述網絡地址下載所述備份組中的所有SST文件和寫前日志；

根據所述網絡地址下載所述備份組中的所有SST文件和寫前日志之后，所述方法還包括：基于所述寫前日志、所述現有SST文件和新增SST文件，啟動存儲引擎，在啟動存儲引擎之后，所述數據庫對外提供服務；

在所述備份流程開啟之前，接收用戶的自定義操作指令，根據所述自定義操作指令，刪除所述寫前日志中的冗余數據，在備份流程執行過程中，將刪除冗余數據之后的寫前日志上傳至所述備份組，在所述存儲引擎重啟之后，多副本應用連接所述數據庫時，拉取刪除冗余文件之后的寫前日志。

2.根據權利要求1所述的方法，其特征在于，根據所述網絡地址下載所述備份組中的所有SST文件和寫前日志，包括：

根據所述link文件，判斷所述備份組中存儲的各項SST文件，是否為所述新增SST文件；

若是，直接根據所述網絡地址下載所述新增SST文件，

若否，獲取所述現有SST文件對應的link文件，并根據所述link文件中記錄的鏈接地址，下載所述現有SST文件。

3.根據權利要求1所述的方法，其特征在于，所述備份組包括一次全量備份和至少一次增量備份，在任一時間點t下，所述備份組中包括一次全量備份和t次增量備份。

4.一種基于共享SST文件的增量備份恢復系統，其特征在于，所述系統包括：備份模塊和恢復模塊，其中，

所述備份模塊用于，獲取數據庫中待執行的本地文件，其中，所述數據庫采用LSM樹架構，所述本地文件包括寫前日志和多個SST文件，

確定備份任務對應的備份組，在所述備份組中，獲取已經保存的歷次備份產生的SST文件的集合，其中，所述SST文件是LSM 樹中的主要數據存儲文件，形式為有序鍵值對集合，以及

根據所述SST文件的唯一標識名，判斷所述本地文件中的各個SST文件，是否已存儲在所述SST文件集合中，若是，將其記為現有SST文件，若否，將其記為新增SST文件，以及

上傳所述寫前日志和所述新增SST文件至所述備份組，并對各個現有SST文件創建對應的link文件，將所述link文件上傳至所述備份組；

所述恢復模塊用于，獲取所述備份組的網絡地址，根據所述網絡地址下載所述備份組中的所有SST文件和寫前日志；

根據所述網絡地址下載所述備份組中的所有SST文件和寫前日志之后，基于所述寫前日志、所述現有SST文件和新增SST文件，啟動存儲引擎，在啟動存儲引擎之后，所述數據庫對外提供服務；

在備份流程開啟之前，接收用戶的自定義操作指令，根據所述自定義操作指令，刪除所述寫前日志中的冗余數據，在備份流程執行過程中，將刪除冗余數據之后的寫前日志上傳至所述備份組，在所述存儲引擎重啟之后，多副本應用連接所述數據庫時，拉取刪除冗余文件之后的寫前日志。

5.根據權利要求4所述的系統，其特征在于，所述恢復模塊根據所述網絡地址下載所述備份組中的所有SST文件和寫前日志，包括：

根據所述link文件，判斷所述備份組中存儲的各項SST文件，是否為所述新增SST文件；

若是，直接根據所述網絡地址下載所述新增SST文件，

若否，獲取所述現有SST文件對應的link文件，并根據所述link文件中記錄的鏈接地址，下載所述現有SST文件。