[發明專利]一種基于CDC實現數據庫數據同步并讀寫分離的方法

在審

• 申請號: 202011188030.1
• 申請日: 2020-10-30
• 公開（公告）號: CN112269832A
• 公開（公告）日: 2021-01-26
• 發明（設計）人: 于偉;周恒;陳磊;孫思清
• 申請（專利權）人: 浪潮云信息技術股份公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/28;G06F16/23;G06F16/2455
• 代理公司: 濟南信達專利事務所有限公司 37100
• 代理人: 姜明

1.一種基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：在統一平臺增加MIRROR關鍵字，在統一平臺中使用MIRROR關鍵字創建鏡像表，在OLTP數據庫引擎和OLAP數據庫引擎中分別建表；對鏡像表執行增、刪、改操作，路由到OLTP引擎中；數據同步服務將數據同步到OLAP引擎中執行；對鏡像表執行查詢操作，路由到OLAP引擎中；刪除鏡像表，則分別刪除OLTP數據庫引擎和OLAP數據庫引擎中的表。

2.根據權利要求1所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：具體包括以下步驟：

S1、在統一平臺中使用MIRROR關鍵字創建鏡像表，在OLTP數據庫引擎和OLAP數據庫引擎中分別建表；

S2、對鏡像表執行增、刪、改操作，該類事務型操作被統一平臺路由到OLTP引擎中；

S3、查詢鏡像表數據，該類分析型操作被統一平臺路由到OLAP型數據庫系統中；

S4、由數據同步服務完成數據從OLTP數據庫引擎到OLAP數據庫引擎；

S5、刪除鏡像表，在OLTP數據庫引擎和OLAP數據庫引擎中分別刪除表。

3.根據權利要求2所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：步驟S1具體包括以下過程：

S11、增加MIRROR關鍵字，在統一平臺創建鏡像表；

S12、使用事務日志技術，記錄事務日志，創建數據表t_mirror_oltp；

S13、在OLTP數據庫引擎中創建數據表t_mirror_oltp；

S14、使用事務日志技術，記錄事務日志，創建數據表t_mirror_olap；

S15、在OLAP數據庫引擎中創建數據表t_mirror_olap；

S16、創建鏡像表事務提交。

4.根據權利要求3所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：步驟S2具體包括以下過程：

S21、判斷當前操作是否是增、刪、改操作；

S22、若是增、刪、改操作，則路由到OLTP數據庫引擎，成功執行，失敗則返回失敗原因。

5.根據權利要求4所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：步驟S3具體包括以下過程：

S31、判斷當前操作是否是查詢操作；

S32、若是查詢操作，則路由到OLAP數據庫引擎，成功返回結果集，失敗返回失敗原因。

6.根據權利要求5所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：步驟S4具體包括以下過程：

S41、數據庫同步服務解析與t_mirror_oltp相關的CDC日志；

S42、生成對應的OLAP引擎對應的操作SQL語句；

S43、在對應的OLAP引擎執行SQL語句，進行數據同步。

7.根據權利要求6所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：步驟S5具體包括以下過程：

S51、使用事務日志技術，記錄事務日志，刪除數據表t_mirror_oltp；

S52、在OLTP數據庫引擎中刪除數據表t_mirror_oltp；

S53、使用事務日志技術，記錄事務日志，刪除數據表t_mirror_olap；

S54、在OLAP數據庫引擎中刪除數據表t_mirror_olap；

S55、刪除鏡像表事務提交。

8.根據權利要求7所述的基于CDC實現數據庫數據同步并讀寫分離的方法，其特征在于：步驟S1和步驟S5中，均通過數據庫事務技術保證原子性。