[發(fā)明專利]數(shù)據(jù)的處理方法及裝置、計算機可讀存儲介質(zhì)、處理器

在審

• 申請?zhí)枺?/td>: 202110559412.9
• 申請日: 2021-05-21
• 公開（公告）號: CN113297326A
• 公開（公告）日: 2021-08-24
• 發(fā)明（設計）人: 朱純磊;董愛軍;張昭坤;袁繼宏
• 申請（專利權(quán)）人: 中國郵政儲蓄銀行股份有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27
• 代理公司: 北京康信知識產(chǎn)權(quán)代理有限責任公司 11240
• 代理人: 周春枚

1.一種數(shù)據(jù)的處理方法，其特征在于，包括：

獲取第一數(shù)據(jù)庫和第二數(shù)據(jù)庫的同步任務，其中，所述同步任務用于將所述第一數(shù)據(jù)庫的目標數(shù)據(jù)同步至所述第二數(shù)據(jù)庫；

根據(jù)所述同步任務進行數(shù)據(jù)配置，得到配置信息,其中，所述配置信息用于確定所述同步任務的執(zhí)行策略；

根據(jù)所述配置信息從所述第一數(shù)據(jù)庫獲取所述目標數(shù)據(jù)；

將所述目標數(shù)據(jù)存儲于中間存儲介質(zhì)，并將所述目標數(shù)據(jù)從所述中間存儲介質(zhì)同步至所述第二數(shù)據(jù)庫。

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)的處理方法，其特征在于，所述配置信息包括元數(shù)據(jù)表，根據(jù)所述同步任務進行數(shù)據(jù)配置，得到配置信息，包括：

獲取所述同步任務中的數(shù)據(jù)源信息和分庫信息；

根據(jù)所述數(shù)據(jù)源信息和所述分庫信息進行數(shù)據(jù)配置，得到所述元數(shù)據(jù)表。

3.根據(jù)權(quán)利要求1所述的數(shù)據(jù)的處理方法，其特征在于，所述配置信息包括映射表，根據(jù)所述同步任務進行數(shù)據(jù)配置，得到配置信息，包括：

獲取同步任務的分步信息和數(shù)據(jù)源信息，其中，所述分步信息包含對所述目標數(shù)據(jù)處理的子任務；

根據(jù)所述分步信息和所述數(shù)據(jù)源信息進行數(shù)據(jù)配置，得到所述映射表。

4.根據(jù)權(quán)利要求3所述的數(shù)據(jù)的處理方法，其特征在于，

所述數(shù)據(jù)源信息包括所述第一數(shù)據(jù)庫至所述第二數(shù)據(jù)庫的同步方向、字段信息和所述目標數(shù)據(jù)的獲取方式；

所述分步信息包含如下任意一項或者幾項：所述目標數(shù)據(jù)的清理步驟、以及創(chuàng)建索引步驟、以及目標表重命名或者重建步驟。

5.根據(jù)權(quán)利要求3所述的數(shù)據(jù)的處理方法，其特征在于，在將所述目標數(shù)據(jù)從所述中間存儲介質(zhì)同步至所述第二數(shù)據(jù)庫之后，所述方法還包括：

判斷所述子任務是否執(zhí)行成功；

在所述子任務全部執(zhí)行成功的情況下，確定所述同步任務執(zhí)行成功；

在任意一個子任務執(zhí)行失敗的情況下，從所述失敗的子任務開始繼續(xù)執(zhí)行所述同步任務的子任務。

6.根據(jù)權(quán)利要求1所述的數(shù)據(jù)的處理方法，其特征在于，所述配置信息包括任務注冊表，根據(jù)所述同步任務進行數(shù)據(jù)配置，得到配置信息，包括：

將所述同步任務注冊到所述任務注冊表中。

7.根據(jù)權(quán)利要求1所述的數(shù)據(jù)的處理方法，其特征在于，將所述目標數(shù)據(jù)存儲于中間存儲介質(zhì)，包括：

將所述目標數(shù)據(jù)的格式進行清洗轉(zhuǎn)換，得到目標數(shù)據(jù)文件；

將所述目標數(shù)據(jù)文件存儲于所述中間存儲介質(zhì)。

8.一種數(shù)據(jù)的處理裝置，其特征在于，包括：

任務獲取模塊，用于獲取第一數(shù)據(jù)庫和第二數(shù)據(jù)庫的同步任務，其中，所述同步任務用于將所述第一數(shù)據(jù)庫的目標數(shù)據(jù)同步至所述第二數(shù)據(jù)庫；

配置模塊，用于根據(jù)所述同步任務進行數(shù)據(jù)配置，得到配置信息；

數(shù)據(jù)獲取模塊，用于根據(jù)所述配置信息從所述第一數(shù)據(jù)庫獲取所述目標數(shù)據(jù)；

同步模塊，用于將所述目標數(shù)據(jù)存儲于中間存儲介質(zhì)，并將所述目標數(shù)據(jù)從所述中間存儲介質(zhì)同步至所述第二數(shù)據(jù)庫。

9.一種計算機可讀存儲介質(zhì)，其特征在于，所述計算機可讀存儲介質(zhì)包括存儲的程序，其中，在所述程序運行時控制所述計算機可讀存儲介質(zhì)所在設備執(zhí)行權(quán)利要求1至7中任意一項所述數(shù)據(jù)的處理方法。

10.一種處理器，其特征在于，所述處理器用于運行程序，其中，所述程序運行時執(zhí)行權(quán)利要求1至7中任意一項所述數(shù)據(jù)的處理方法。