[發明專利]增量數據同步的方法、裝置、計算機設備及計算機存儲介質

在審

• 申請號: 201910218794.1
• 申請日: 2019-03-21
• 公開（公告）號: CN110083579A
• 公開（公告）日: 2019-08-02
• 發明（設計）人: 張輝
• 申請（專利權）人: 深圳壹賬通智能科技有限公司
• 主分類號: G06F16/178
• 分類號: G06F16/178;G06F16/176;G06F16/27;G06F16/2455
• 代理公司: 北京中強智尚知識產權代理有限公司 11448
• 代理人: 黃耀威

本申請公開了一種增量數據同步的方法、裝置、計算機設備及計算機存儲介質，涉及云存儲技術領域，可以將合適的增量數據同步方式推送給需要同步的數據表，提高增量數據的同步效率。所述方法包括：獲取適用于增量數據同步方式的模式字符；根據所述模式字符確定適用于增量數據同步方式的預設匹配規則，構造多個增量數據同步方式的正則表達式；當接收到增量數據同步請求時，將所述待同步增量數據表中的數據分別與每個增量同步方式的正則表達式進行匹配，查找是否存在與所述待同步數據表中的數據相匹配的字符串；若存在，則根據所述與所述待同步數據表中增量數據匹配字符串數量最多的增量數據同步方式對所述待同步增量數據表進行增量數據同步。

技術領域

本發明涉及云存儲技術領域，尤其是涉及增量數據同步的方法、裝置、計算機設備及計算機存儲介質。

背景技術

計算機網絡的飛速發展和信息化的推進使得數據成為很多企業的寶貴資源，使得數據采集、存儲和處理任務與日俱增，基于網絡的數據共享已經成為人們獲取數據資源不可或缺的方式。

為了更好地實現數據共享需要對共享數據進行同步，數據同步對企業來說至關重要，比如企業的服務器端用于管理分屬于企業不同部門的業務端，并且在服務器端存儲有管理數據，那么為了方便服務器端對各個業務端進行管理，同時提高業務端的數據處理效率，需要保證服務器端與各個業務端之間的數據同步。

通常情況下，根據數據寫入后是否會發生變化將需要同步的數據分為兩類數據，一類是不會發生變化的數據，一般是日志數據等；另一類是會變化的數據，一般是人員表等。針對會變化的數據，隨著時間維度的改版，業務端會不斷新增記錄的數據，該新增記錄的數據稱為增量數據。用戶可以根據實際需求選擇不同的增量數據同步方式，例如，全表刪除的增量數據同步方式、時間戳動態更新的增量數據同步方式以及逐條對比的增量數據同步方式。然而，不同的增量數據同步方式需要對數據表的結構、大小進行手動判斷，需要耗費大量人工操作時間來選擇合適的增量數據同步方式，并且在人工操作過程中容易產生錯誤，將不合適的增量數據同步方式推送給需要同步的數據表，導致增量數據同步的效率降低。

發明內容

有鑒于此，本發明提供了一種增量數據同步的方法、裝置、計算機設備及計算機存儲介質，主要目的在于解決目前相關技術中增量數據同步效率低下的問題。

依據本發明一個方面，提供了一種增量數據同步的方法，該方法包括：

獲取適用于增量數據同步方式的模式字符；

根據所述模式字符確定適用于增量數據同步方式的預設匹配規則，構造多個增量數據同步方式的正則表達式；

當接收到增量數據同步請求時，將所述待同步增量數據表中的數據分別與每個增量同步方式的正則表達式進行匹配，查找是否存在與所述待同步數據表中的數據相匹配的字符串；

若存在，則根據所述與所述待同步數據表中增量數據匹配字符串數量最多的增量數據同步方式對所述待同步增量數據表進行增量數據同步。

進一步地，所述獲取適用于增量數據同步方式的模式字符包括：

通過解析適用于增量數據同步方式的數據表定義的字段，獲取適用于增量數據同步方式的字段；

從所述適用于增量數據同步方式的字段中選取預設字段作為適用于增量數據同步方式的模式字符。

進一步地，所述模式字符中包含適用于增量數據同步方式的特征信息，所述根據所述模式字符確定適用于增量數據同步方式的預設匹配規則，構造多個增量數據同步方式的正則表達式包括：

根據所述模式字符中適用于增量數據同步方式的特征信息，確定所述模式字符在增量數據表中的匹配規則；

根據所述模式字符在增量數據表中的匹配規則，構造多個增量數據同步方式的正則表達式。