[發明專利]多源異構數據備份方法及裝置

在審

• 申請號: 202110709884.8
• 申請日: 2021-06-25
• 公開（公告）號: CN113448775A
• 公開（公告）日: 2021-09-28
• 發明（設計）人: 陽兵;沈贇;林丹;陽萬里
• 申請（專利權）人: 中國工商銀行股份有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14
• 代理公司: 北京三友知識產權代理有限公司 11127
• 代理人: 任默聞;王濤

1.一種多源異構數據備份裝置，其特征在于，包括：接入層、任務管理模塊、數據歸集模塊、登錄管理模塊和數據導出模塊；

所述接入層用于接收備份任務請求，并將所述備份任務請求路由至所述任務管理模塊，其中，所述備份任務請求至少包括目標賬戶和至少一個數據源標識；

所述任務管理模塊用于響應于所述備份任務請求生成任務信息，并基于所述任務信息進行任務調度執行，調用所述數據歸集模塊進行數據歸集，調用所述數據導出模塊進行數據導出；

所述數據歸集模塊用于調用所述登錄管理模塊登錄所述至少一個數據源標識中各數據源標識對應的數據源，根據所述任務信息生成臨時表，將所述各數據源標識對應的數據源中的數據抽取到所述臨時表中，并生成數據歸集文件清單；

所述登錄管理模塊用于根據所述至少一個數據源標識和預設映射表登錄所述各數據源標識對應的數據源，其中，所述預設映射表中記錄有所述目標賬戶的登錄賬號與數據源標識之間的映射關系；

所述數據導出模塊用于調用所述登錄管理模塊登錄所述各數據源標識對應的數據源，根據所述數據歸集文件清單從所述各數據源標識對應的數據源導出對應的數據，并將導出的數據拷貝至所述目標賬戶對應的目標服務器進行備份。

2.根據權利要求1所述的裝置，其特征在于，所述任務管理模塊具體用于：對所述備份任務請求中的參數進行校驗，在校驗通過的情況下，響應于所述備份任務請求生成任務信息。

3.根據權利要求2所述的裝置，其特征在于，所述任務管理模塊還具體用于：對所述任務信息進行緩存，從所述緩存中讀取任務信息，將讀取到的任務信息提交至線程池開始執行。

4.根據權利要求1所述的裝置，其特征在于，所述數據導出模塊還用于：在根據所述數據歸集文件清單從所述各數據源標識對應的數據源導出對應的數據之后，確定是否需要對導出的數據進行脫敏處理，在確定需要對導出的數據進行脫敏處理的情況下，對所述導出的數據進行脫敏處理。

5.根據權利要求1所述的裝置，其特征在于，所述裝置還包括數據管理模塊，所述數據管理模塊用于基于current_user函數創建視圖以向用戶提供統一的訪問界面。

6.根據權利要求1所述的裝置，其特征在于，所述任務管理模塊用于根據所述數據歸集文件清單為所述數據導出模塊動態分配系統資源。

7.根據權利要求1所述的裝置，其特征在于，所述數據歸集模塊具體用于根據任務信息生成臨時表創建及數據抽取的SQL語句，在調用所述登錄管理模塊登錄所述至少一個數據源標識中各數據源標識對應的數據源之后，執行所述SQL語句，以生成臨時表并將數據抽取到所述臨時表中。

8.一種多源異構數據備份方法，其特征在于，應用于多源異構數據備份裝置，所述裝置包括：接入層、任務管理模塊、數據歸集模塊、登錄管理模塊和數據導出模塊；所述方法包括：

所述接入層接收備份任務請求，并將所述備份任務請求路由至所述任務管理模塊，其中，所述備份任務請求至少包括目標賬戶和至少一個數據源標識；

所述任務管理模塊響應于所述備份任務請求生成任務信息，基于所述任務信息進行任務調度執行，并向所述數據歸集模塊發送第一調用請求；

響應于所述第一調用請求，所述數據歸集模塊向所述登錄管理模塊發送第二調用請求；響應于所述第二調用請求，所述登錄管理模塊根據所述至少一個數據源標識和預設映射表登錄所述各數據源標識對應的數據源，其中，所述預設映射表中記錄有所述目標賬戶的登錄賬號與數據源標識之間的映射關系；

所述數據歸集模塊根據所述任務信息生成臨時表，將所述各數據源標識對應的數據源中的數據抽取到所述臨時表中，并生成數據歸集文件清單；

所述任務管理模塊向所述數據導出模塊發送第三調用請求；響應于所述第三調用請求，所述數據導出模塊根據所述數據歸集文件清單從所述各數據源標識對應的數據源導出對應的數據，并將導出的數據拷貝至所述目標賬戶對應的目標服務器進行備份。