[發明專利]數據割接方法及裝置

在審

• 申請號: 201810778841.3
• 申請日: 2018-07-16
• 公開（公告）號: CN108959611A
• 公開（公告）日: 2018-12-07
• 發明（設計）人: 姜偉;佟佳明;李德鑫;金守良;劉學成;趙世保;郭樺;張鑫;岳一紅;李書堯
• 申請（專利權）人: 中國聯合網絡通信集團有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 朱穎;劉芳

1.一種數據割接方法，其特征在于，包括：

將源數據庫中的第一數據導入中間數據庫，所述第一數據包括所述源數據庫中在第一時刻之前的全部待割接數據；

對導入所述中間數據庫的所述第一數據進行數據清理和數據整合，生成第二數據；

根據目標數據庫的數據格式，將所述第二數據導入所述目標數據庫；

將所述源數據庫中的第三數據導入所述中間數據庫，所述第三數據包括所述源數據庫中在所述第一時刻至當前時刻之間產生的全部待割接數據；

根據所述第二數據，對導入所述中間數據庫的所述第三數據進行數據去重，生成第四數據；

根據所述目標數據庫的數據格式，將所述第四數據導入所述目標數據庫。

2.根據權利要求1所述的方法，其特征在于，所述源數據庫包括多個子數據庫，所述中間數據庫包括多個實例；在所述將源數據庫中的第一數據導入中間數據庫之前還包括：

根據預設規則將所述多個子數據庫在所述多個實例之間進行分配。

3.根據權利要求1所述的方法，其特征在于，所述目標數據庫為分布式數據庫。

4.根據權利要求1-3任一項所述的方法，其特征在于，

所述根據目標數據庫的數據格式，將所述第二數據導入所述目標數據庫包括：

根據所述目標數據庫的數據格式，對所述第二數據進行拆分，將拆分后的數據通過多個主機設備并行導入所述目標數據庫；

所述根據所述目標數據庫的數據格式，將所述第四數據導入所述目標數據庫包括：

根據所述目標數據庫的數據格式，對所述第四數據進行拆分，將拆分后的數據通過所述多個主機設備并行導入所述目標數據庫。

5.一種數據割接裝置，其特征在于，包括：

第一導入模塊，用于將源數據庫中的第一數據導入中間數據庫，所述第一數據包括所述源數據庫中在第一時刻之前的全部待割接數據；

第一處理模塊，用于對導入所述中間數據庫的所述第一數據進行數據清理和數據整合，生成第二數據；

第二導入模塊，用于根據目標數據庫的數據格式，將所述第二數據導入所述目標數據庫；

第三導入模塊，用于將所述源數據庫中的第三數據導入所述中間數據庫，所述第三數據包括所述源數據庫中在所述第一時刻至當前時刻之間產生的全部待割接數據；

第二處理模塊，用于根據所述第二數據，對導入所述中間數據庫的所述第三數據進行數據去重，生成第四數據；

第四導入模塊，用于根據所述目標數據庫的數據格式，將所述第四數據導入所述目標數據庫。

6.根據權利要求5所述的裝置，其特征在于，所述源數據庫包括多個子數據庫，所述中間數據庫包括多個實例；還包括分配模塊，用于在所述將源數據庫中的第一數據導入中間數據庫之前，根據預設規則將所述多個子數據庫在所述多個實例之間進行分配。

7.根據權利要求5所述的裝置，其特征在于，所述目標數據庫為分布式數據庫。

8.根據權利要求5-7任一項所述的裝置，其特征在于，

所述第二導入模塊，具體用于根據所述目標數據庫的數據格式，對所述第二數據進行拆分，將拆分后的數據通過多個主機設備并行導入所述目標數據庫；

所述第四導入模塊，具體用于根據所述目標數據庫的數據格式，對所述第四數據進行拆分，將拆分后的數據通過所述多個主機設備并行導入所述目標數據庫。

9.一種數據割接設備，其特征在于，包括：

存儲器；

處理器；以及

計算機程序；

其中，所述計算機程序存儲在所述存儲器中，并被配置為由所述處理器執行以實現如權利要求1-4任一項所述的方法。

10.一種計算機可讀存儲介質，其特征在于，其上存儲有計算機程序，所述計算機程序被處理器執行以實現如權利要求1-4任一項所述的方法。