[發明專利]一種數據同步方法、裝置以及電子設備

有效

• 申請號: 201710060057.4
• 申請日: 2017-01-24
• 公開（公告）號: CN108345617B
• 公開（公告）日: 2022-05-06
• 發明（設計）人: 唐治洋;付鑫;盧毅軍;陶云峰;安凱歌
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/23
• 代理公司: 北京清源匯知識產權代理事務所(特殊普通合伙) 11644
• 代理人: 馮德魁

本申請公開了一種數據同步方法，包括：獲取待同步數據對應日志的序列標識信息；判斷所述序列標識信息是否滿足其對應的變更條件，若是，根據所述日志所記錄數據變更操作涉及的所述待同步數據的數據變更，將所述待同步數據的數據變更應用到數據存儲空間中。所述數據同步方法，在進行數據同步時，將滿足約束條件的待同步數據的數據變更應用到數據存儲空間中，從而避免了由于不可靠數據傳輸導致數據存儲空間的數據一致性被破壞的情形，確保數據同步過程中的數據一致性。

技術領域

本申請涉及數據同步技術領域，具體涉及一種數據同步方法。本申請同時涉及一種數據同步裝置，以及一種電子設備。

背景技術

隨著云計算的發展，越來越多的業務需求要求一種更強大的用于數據存儲的數據中心，并且要求數據中心具有較強的高可用性，能夠最大程度的減少甚至消除系統故障對正常業務的影響，因此，建立多個數據中心實現業務容災成為必然選擇，這些數據中心之間的數據同步成為實現業務高可用性至關重要的一環。

目前有許多方案著眼于實現分布式場景下的數據一致性，通過在不同的服務器上部署用戶進程的多個運行副本，同時保證同一時間有且僅有一個進程作為主節點(Master)提供服務，其余進程為處于備用狀態的從節點(Slave)，一旦Master進程發生故障，會有一個Slave被選舉為新Master來提供服務。然而，當前選舉的新Master代替發生故障的Master進行工作之后，發生故障的Master在發生故障前未完成的數據變更操作，可能會由于數據包丟失、重發或者網絡延時等影響因素，導致數據變更操作經過一定的延時之后到達，但是，延時的數據變更操作到達時，這一數據變更操作對應的數據已經被新Master更新，在此基礎上執行延時到達的數據變更操作，勢必會對數據一致性造成破壞。

發明內容

本申請提供一種數據同步方法，以解決現有技術存在的數據一致性被破壞的缺陷。本申請另外提供一種數據同步裝置，以及一種電子設備。

本申請提供一種數據同步方法，包括：

獲取待同步數據對應日志的序列標識信息；

判斷所述序列標識信息是否滿足其對應的變更條件，若是，執行下一步；

根據所述日志所記錄數據變更操作涉及的所述待同步數據的數據變更，將所述待同步數據的數據變更應用到數據存儲空間中。

可選的，所述日志通過集群當中的主節點從日志隊列中讀取，且所述主節點從所述日志隊列中讀取日志時，根據日志加入所述日志隊列的時間，按照從先到后的順序依次從所述日志隊列中讀取日志。

可選的，所述序列標識信息包括下述至少一項：所述日志在所述日志隊列當中的序列號，用于從所述日志隊列獲取所述日志的主節點的節點標識，用于傳輸所述日志的數據連接的連接標識；

其中，所述數據連接包括：所述主節點與所述數據存儲空間之間建立的TCP連接。

可選的，若所述序列標識信息為所述日志在所述日志隊列當中的序列號，所述日志的序列號對應的變更條件包括：序列號大于最后一次發生數據變更時對應日志的末位變更序列號，或者，序列號大于或者等于所述末位變更序列號。

可選的，所述判斷所述序列標識信息是否滿足其對應的變更條件，采用如下方式實現：

判斷所述日志當中攜帶的序列號是否大于所述待同步數據對應的末位序列號，若是，執行下一步；

或者，判斷所述日志當中攜帶的序列號是否大于或者等于所述待同步數據對應的末位序列號，若是，執行下一步。

可選的，所述數據存儲空間采用Key/Value數據存儲模型進行數據存儲；其中，Key為所述待同步數據，Value為所述待同步數據的值。