[發明專利]一種數據同步的方法、裝置和系統

有效

• 申請號: 201210543604.1
• 申請日: 2012-12-14
• 公開（公告）號: CN103873517B
• 公開（公告）日: 2017-07-14
• 發明（設計）人: 任志鴻;魏霄鵬;徐雙桑
• 申請（專利權）人: 中興通訊股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 工業和信息化部電子專利中心11010
• 代理人: 梁軍

1.一種數據同步的方法，其特征在于，所述方法包括以下步驟：

根據配置文件的配置，從數據庫服務器中導出當前任務所需的數據文件；

根據所述配置文件的配置，將所述數據文件上傳至指定的第一目標地址，以完成數據同步；

所述配置文件支持同時配置多個數據文件導出任務，各個導出任務之間相互獨立，每個任務對多個數據庫進行訪問和操作，并導出數據文件；

所述根據所述配置文件的配置，將所述數據文件上傳至指定的第一目標地址時，還包括：

根據所述配置文件的配置，生成用以校驗所述數據文件的核查文件，其中，所述核查文件中包含所述數據文件的屬性信息；

將所述核查文件協同所述數據文件一同上傳至指定的第一目標地址。

2.如權利要求1所述的方法，其特征在于，所述根據配置文件的配置，從數據庫服務器中導出當前任務所需的數據文件包括：

根據配置文件中的數據庫信息配置項，確定當前所述任務對應的數據庫信息；

根據確定的數據庫信息，確定與當前所述任務對應的數據庫服務器，并與確定的所述數據庫服務器連接；

執行配置文件中的導出腳本文件，從確定的數據庫服務器中導出當前所述任務所需的數據文件。

3.如權利要求1所述的方法，其特征在于，所述根據所述配置文件的配置，生成與導出的所述數據文件對應的核查文件包括；

根據所述配置文件的配置，對導出的所述數據文件的屬性進行分析；

根據分析結果生成所述核查文件，其中，所述核查文件包括以下至少之一：所述數據文件的名稱、所述數據文件的大小、所述數據文件的記錄數、所述數據文件的時間參數。

4.如權利要求1所述的方法，其特征在于，在將所述數據文件和所述核查文件上傳至指定的第一目標地址之前，所述方法還包括；

判斷當前所述任務是否需要執行合并操作；

當需要執行合并操作時，將所述數據文件和所述核查文件上傳至指定的第二目標地址，根據配置文件中合并節點的配置項，在所述第二目標地址內對所述數據文件進行合并和/或所述核查文件進行合并。

5.如權利要求4所述的方法，其特征在于，所述合并節點的配置項包括以下至少之一：合并前源文件所在路徑、合并文件類型，文件核查個數、合并后文件分割最大記錄闕值、文件分割序列號長度、合并后文件頭內容配置、合并后文件名稱、合并后文件保存路徑、原始文件備份目錄和保存時間、是否支持文件壓縮。

6.一種數據同步的裝置，其特征在于，包括：

數據導出單元，用于根據配置文件的配置，從數據庫服務器中導出當前任務所需的數據文件；

上傳單元，用于根據所述配置文件的配置，將所述數據文件上傳至指定的第一目標地址，以完成數據同步；

所述配置文件支持同時配置多個數據文件導出任務，各個導出任務之間相互獨立，每個任務對多個數據庫進行訪問和操作，并導出數據文件；

核查文件生成單元，用于根據所述配置文件的配置，生成用以校驗所述所述數據文件的核查文件，其中，所述核查文件中包含所述數據文件的屬性信息，

所述上傳單元將所述核查文件協同所述數據文件一同上傳至指定的第一目標地址。

7.如權利要求6所述的裝置，其特征在于，所述數據導出單元包括：

第一確定模塊，用于根據配置文件中的數據庫信息配置項，確定當前所述任務對應的數據庫信息；

第二確定模塊，用于根據確定的數據庫信息，確定與當前所述任務對應的 數據庫服務器，并與確定的所述數據庫服務器連接；

執行模塊，用于執行配置文件中的導出腳本文件，從確定的數據庫服務器中導出當前所述任務所需的數據文件。

8.如權利要求6所述的裝置，其特征在于，所述核查文件生成單元包括；

分析模塊，用于根據所述配置文件的配置，對導出的所述數據文件的屬性進行分析；

生成模塊，用于根據分析結果生成所述核查文件，其中，所述核查文件包括以下至少之一：所述數據文件的名稱、所述數據文件的大小、所述數據文件的記錄數、所述數據文件的時間參數。