[發明專利]批量數據同步方法和裝置

有效

• 申請號: 201610720655.5
• 申請日: 2016-08-24
• 公開（公告）號: CN106325933B
• 公開（公告）日: 2019-07-02
• 發明（設計）人: 申會闖;王海寧
• 申請（專利權）人: 明算科技（北京）股份有限公司
• 主分類號: G06F9/445
• 分類號: G06F9/445;G06F9/54;G06F16/27
• 代理公司: 北京慧誠智道知識產權代理事務所(特殊普通合伙) 11539
• 代理人: 李楠

1.一種批量數據同步方法，其特征在于，所述方法包括：

建立本地數據庫，所述本地數據庫中包括臨時表、歷史表和應用數據表；所述臨時表、歷史表和應用數據表的表項數據結構相同；所述歷史表用于記錄當前向一個應用或多個應用提供的數據；

獲取第一應用的數據源數據，所述數據源數據包括數據源字段；

設置所述數據源字段與臨時表字段的對應關系；

根據預設條件，按照所述對應關系，將所述數據源數據導入臨時表，形成所述臨時表字段；所述臨時表中包括由臨時表字段構成的多條記錄；

對比所述臨時表與歷史表中的記錄；

如果臨時表的第一記錄存在于所述歷史表中，則確定所述第一記錄中的字段是否有更新，如果有更新，則將所述第一記錄更新到應用數據表中；

如果所述第一記錄不存在于所述歷史表中，則將所述第一記錄插入所述應用數據表中；

如果所述臨時表中不存在所述歷史表中的第二記錄，則在所述應用數據表中將相應的記錄刪除；其中，所述應用數據表用于提供第二應用的數據源數據。

2.根據權利要求1所述的批量數據同步方法，其特征在于，在所述臨時表與歷史表中的記錄全部對比完成后，所述方法還包括：

刪除所述歷史表中的全部記錄；

將所述臨時表中的記錄全部導入所述歷史表中；

清空所述臨時表中的記錄。

3.根據權利要求1所述的批量數據同步方法，其特征在于，所述設置所述數據源的字段與所述臨時表中字段的對應關系具體為：

所述數據源的一個字段與所述臨時表的一個字段相對應。

4.根據權利要求1所述的批量數據同步方法，其特征在于，所述設置所述數據源的字段與所述臨時表中字段的對應關系具體為：

所述源數據的多個字段拼接形成一個拼接字段，一個所述拼接字段與所述臨時表的一個字段相對應。

5.根據權利要求1所述的批量數據同步方法，其特征在于，所述方法還包括，根據預設時間，對所述臨時表、歷史表和應用數據表進行備份存儲。

6.一種批量數據同步裝置，其特征在于，所述裝置包括：

生成單元，用于建立本地數據庫，所述本地數據庫中包括臨時表、歷史表和應用數據表；所述臨時表、歷史表和應用數據表的表項數據結構相同；所述歷史表用于記錄當前向一個應用或多個應用提供的數據；

獲取單元，用于獲取第一應用的數據源數據，所述數據源數據包括數據源字段；

設置單元，用于設置所述數據源字段與臨時表字段的對應關系；

導入單元，用于根據預設條件，按照所述對應關系，將所述數據源數據導入臨時表，形成所述臨時表字段；所述臨時表中包括由臨時表字段構成的多條記錄；

處理單元，用于對比所述臨時表與歷史表中的記錄；當臨時表的第一記錄存在于所述歷史表中時，則確定所述第一記錄中的字段是否有更新，如果有更新，則將所述第一記錄更新到應用數據表中；當所述第一記錄不存在于所述歷史表中，則將所述第一記錄插入所述應用數據表中；當所述臨時表中不存在所述歷史表中的第二記錄，則在所述應用數據表中將相應的記錄刪除；其中，所述應用數據表用于提供第二應用的數據源數據。

7.根據權利要求6所述的裝置，其特征在于，所述處理單元還用于，在所述臨時表與歷史表中的記錄全部對比完成后，刪除所述歷史表中的全部記錄；生成導入指令，控制所述導入單元將所述臨時表中的記錄全部導入所述歷史表中；并且，清空所述臨時表中的記錄。

8.根據權利要求6所述的裝置，其特征在于，所述設置單元具體用于，設置所述數據源的一個字段與所述臨時表的一個字段相對應。

9.根據權利要求6所述的裝置，其特征在于，所述設置單元具體用于，設置所述數據源的拼接字段與所述臨時表的一個字段相對應；所述拼接字段為由所述源數據的多個字段拼接形成的拼接字段。

10.根據權利要求6所述的裝置，其特征在于，所述裝置還包括存儲單元，用于根據預設時間，對所述本地數據庫中的所述臨時表、歷史表和應用數據表進行備份存儲。