[發明專利]一種數據同步方法、裝置以及電子設備

有效

• 申請號: 201710060057.4
• 申請日: 2017-01-24
• 公開（公告）號: CN108345617B
• 公開（公告）日: 2022-05-06
• 發明（設計）人: 唐治洋;付鑫;盧毅軍;陶云峰;安凱歌
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/23
• 代理公司: 北京清源匯知識產權代理事務所(特殊普通合伙) 11644
• 代理人: 馮德魁

1.一種數據同步方法，其特征在于，包括：

獲取日志在待同步數據對應日志隊列當中的序列號，用于從所述日志隊列獲取所述日志的主節點的節點標識，用于傳輸所述日志的數據連接的連接標識；其中，所述數據連接包括：所述主節點與數據存儲空間之間建立的TCP連接；所述待同步數據是指集群當中的主節點向所述日志隊列提交的數據變更操作對應的數據；所述待同步數據對應日志，是指所述待同步數據對應的數據變更操作被提交至日志隊列后轉換成的日志；所述日志通過所述集群當中的主節點從所述日志隊列中讀取；

判斷所述序列號是否大于最后一次發生數據變更時對應日志的末位變更序列號，或者，所述序列號是否大于或者等于所述末位變更序列號；若是，執行下一步；

根據所述日志所記錄數據變更操作涉及的所述待同步數據的數據變更，將所述待同步數據的數據變更應用到數據存儲空間中。

2.根據權利要求1所述的數據同步方法，其特征在于，所述主節點從所述日志隊列中讀取日志時，根據日志加入所述日志隊列的時間，按照從先到后的順序依次從所述日志隊列中讀取日志。

3.根據權利要求1所述的數據同步方法，其特征在于，所述數據存儲空間采用Key/Value數據存儲模型進行數據存儲；

其中，Key為所述待同步數據，Value為所述待同步數據的值。

4.根據權利要求3所述的數據同步方法，其特征在于，所述待同步數據對應的末位變更序列號通過所述Key/Value數據存儲模型進行存儲，并且按照與所述待同步數據一一對應的方式通過所述Key/Value數據存儲模型進行存儲。

5.根據權利要求1所述的數據同步方法，其特征在于，所述數據存儲空間的末位日志序列號存儲在所述數據存儲空間中，并且，每次有數據變更應用到所述數據存儲空間中，根據當前數據變更對應日志的序列號更新所述數據存儲空間的末位日志序列號。

6.根據權利要求1所述的數據同步方法，其特征在于，所述數據變更操作包括：

數據創建操作、數據刪除操作和數據修改操作。

7.根據權利要求1所述的數據同步方法，其特征在于，所述集群當中包含一個主節點和至少一個從節點，所述主節點通過調用預先提供的分布式鎖服務從所述集群的節點當中選舉獲得，或者，所述主節點基于內嵌的分布式選舉協議從所述集群的節點當中選舉獲得；

其中，所述分布式選舉協議包括：Paxos。

8.根據權利要求1至7任意一項所述的數據同步方法，其特征在于，若所述序列號小于所述末位變更序列號，不允許將所述待同步數據的數據變更應用到所述數據存儲空間中。

9.根據權利要求1至7任意一項所述的數據同步方法，其特征在于，所述數據存儲空間由存儲系統提供并進行維護，所述獲取日志在待同步數據對應日志隊列當中的序列號，所述判斷所述序列號是否滿足其對應的變更條件步驟，以及所述根據所述日志所記錄數據變更操作涉及的所述待同步數據的數據變更，將所述待同步數據的數據變更應用到數據存儲空間中步驟，通過所述存儲系統執行。