[發明專利]基于關系型數據庫主從異步復制架構的數據同步方法

有效

• 申請號: 202011424556.5
• 申請日: 2020-12-08
• 公開（公告）號: CN112364103B
• 公開（公告）日: 2022-03-01
• 發明（設計）人: 周文龍;唐軍
• 申請（專利權）人: 四川長虹電器股份有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/28
• 代理公司: 四川省成都市天策商標專利事務所(有限合伙) 51213
• 代理人: 陳藝文

本發明公開了一種基于關系型數據庫主從異步復制架構的數據同步方法，包括：獲取主數據庫節點此次數據變化量大小；獲取主數據庫節點當前數據庫數據頁大小；獲取此次數據庫事務產生的數據變化量大小是否滿足分段的體量大小標準，若滿足分段的數據體量標準，則獲取欲進行分段復制的分段數；根據分段數和數據庫數據頁大小，進行分段點設置；根據分段點設置，分段復制事務產生的批量數據變化；本發明提高了數據在主從異步復制架構間數據同步的效率，降低了數據同步的延遲時間。

技術領域

本發明涉及數據同步技術領域，特別是一種基于關系型數據庫主從異步復制架構的數據同步方法。

背景技術

關系型數據庫主從異步復制架構是常用的數據庫拓撲結構，常被作為數據讀寫分離，數據庫主庫備庫高可用等數據架構，應用于企業用戶信息數據、工業數據、財務數據等多種業務場景的數據架構中。通過數據復制方式達到數據分節點存放的目的，滿足人們對于數據讀寫性能和數據安全性的生產需求。但隨著企業業務井噴式發展，用戶信息、業務、財務等多種業務數據呈大量增長態勢，大批量的數據變更在數據庫異步復制架構節點間的同步時間也在逐漸增長。由于數據庫異步復制架構特性，即事務在主節點產生的數據變化要等到主節點事務提交后，才會在從節點開始同步，從而產生了同步延遲，同步時間隨著同一數據庫事務產生數據變化量的增加而增加。

在此背景下，針對關系型數據庫主從異步復制架構中，主節點數據庫中已提交事務產生的大批量數據變化同步至其他從屬數據庫節點的同步時間也逐漸增長，數據同步產生的延遲時間日益增長，已經滿足不了人們對于數據變化實時同步至各個節點在速度上的要求，即事務在主節點產生的數據變化要等到主節點事務提交后，才會在從節點開始同步，從而產生了同步延遲，同步時間隨著同一數據庫事務產生數據變化量的增加而增加。

發明內容

為解決現有技術中存在的問題，本發明的目的是針對事務產生的大批量數據變化(更新、刪除、新增)的數據同步時間要求，本發明提出一種提高同步效率，減少數據變化同步延遲時間的基于關系型數據庫主從異步復制架構的數據同步方法，即將同一個事物產生的批量數據變化分段復制到從屬數據庫節點，從而節約了異步復制架構中，必須在主節點全部提交事務完成的所有數據變更后，再同步至從屬數據庫節點的時間。

為實現上述目的，本發明采用的技術方案是：一種基于關系型數據庫主從異步復制架構的數據同步方法，包括以下步驟：

步驟1、部署函數獲取關系型數據庫主從異步復制架構中主數據庫節點此次數據變化量大小x，單位為字節；

步驟2、部署函數獲取關系型數據庫主從異步復制架構中主數據庫節點當前數據庫數據頁大小x₁，單位為字節；

步驟3、部署函數獲取關系型數據庫主從異步復制架構中此次數據庫事務產生的數據變化量大小x是否滿足分段的體量大小標準，若不滿足，直接進行異步復制，若滿足分段的數據體量標準，則獲取欲進行分段復制的分段數y；

步驟4、根據分段數y和數據庫數據頁大小x₁，進行分段點設置，在產生變化的日志記錄中，根據數據庫頁大小x₁設置分段點，直至最后一個分段；

步驟5、根據分段點設置，關系型數據庫主從異步復制架構中，根據分段點所在位置為緩存中數據復制的截止點，分段復制事務產生的批量數據變化；

步驟6、關系型數據庫主從異步復制架構中的主數據庫節點事務提交，批量數據寫入持久層，則從屬數據庫節點也提交相應多段復制數據，主數據庫節點事務回滾，則從屬數據庫節點也回滾同一事務中多個分段的數據。

作為本發明的進一步改進，數據庫數據頁大小x₁為16384字節。

作為本發明的進一步改進，在步驟3中，所述的分段數y為大于或等于1的整數，步驟3具體包括：