[發明專利]一種oracle與MySQL數據庫之間數據同步的優化方法及系統

在審

• 申請號: 202211022332.0
• 申請日: 2022-08-25
• 公開（公告）號: CN115408470A
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 王翠;趙冬陽;李國濤
• 申請（專利權）人: 浪潮云信息技術股份公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/28;G06F16/22
• 代理公司: 濟南信達專利事務所有限公司 37100
• 代理人: 姜鵬

本發明涉及數據庫技術領域，具體為一種oracle與MySQL數據庫之間數據同步的優化方法，包括以下步驟：設置任務表，用于存儲源數據庫和目標數據庫的信息；配置需要同步的數據表，設置最大線程數M和每個線程數最大的處理記錄數N；輪詢任務表，當開始時間到了之后，執行數據同步；獲取源數據表中的數據量；根據配置的M和N獲取線程數；對每一個線程執行同步流程，更改任務表信息；有益效果為：本發明提出的ORACLE與MYSQL數據庫之間數據同步的優化方法及系統實現了oracle與MySQL數據庫數據頻繁同步效率提升的效果；通過禁用和啟用mysql的索引，提升寫入效率。

技術領域

本發明涉及數據庫技術領域，具體為一種oracle與MySQL數據庫之間數據同步的優化方法及系統。

背景技術

隨著信息技術的飛速發展，信息化建設的不斷深入，使得各行各業的數據量不斷增加。不同的行業會選用不同的數據庫來存儲數據，常見的關系型數據庫主要有MySQL,Oracle,SQLServer,Accress等。

現有技術中，使用最為廣泛的關系型數據庫主要是MySQL和oracle。MySQL數據庫是最受歡迎的開源跨平臺數據庫管理系統，最初由Mysql AB公司開發、發布和支持，現在他是Oracle Corporation的分支機構。MySQL是一個快速的、多線程、多用戶和健壯的SQL數據庫服務器。Oracle數據庫是美國ORACLE公司提供的以分布式數據庫為核心的一組軟件產品，是目前最流行的客戶/服務器或B/S體系結構的數據庫之一。Oracle數據庫是目前世界上使用最為廣泛的數據庫管理系統，作為一個通用的數據庫系統，它具有完整的數據管理功能；作為一個關系數據庫，它是一個完備關系的產品；作為分布式數據庫它實現了分布式處理功能。

但是，信息化建設的各個業務系統之間數據同步、子業務系統和核心業務系統之間數據同步的場景需求不斷出現，業務量不斷增多，如何快速高效的將不同數據庫數據進行同步，就是我們亟需要解決的問題。

發明內容

本發明的目的在于提供一種oracle與MySQL數據庫之間數據同步的優化方法及系統，以解決上述背景技術中提出的問題，將oracle源數據庫中的數據導出至csv文件，然后將csv文件內容導入到mysql目標數據庫中。

為實現上述目的，本發明提供如下技術方案：一種ORACLE與MYSQL數據庫之間數據同步的優化方法，所述oracle與MySQL數據庫之間數據同步的優化方法包括以下步驟：

設置任務表，用于存儲源數據庫和目標數據庫的信息；

配置需要同步的數據表，設置最大線程數M和每個線程數最大的處理記錄數N；

輪詢任務表，當開始時間到了之后，執行數據同步；

獲取源數據表中的數據量；

根據配置的M和N獲取線程數；

對每一個線程執行同步流程，更改任務表信息。

優選的，設置任務表時，

任務表包含源和目的數據庫信息，包括數據庫類型、數據庫連接登錄信息、數據表信息、數據同步時間、同步結束時間和同步結果，主要是存儲需要同步數據的數據庫信息，包括源數據庫oracle和數據表，目的數據庫mysql和數據表，同步時間，結束時間等信息。

優選的，輪詢任務表時，

當觸發表的開始同步時間后，轉至下一步，進行數據同步準備，當同步時間未到時，不做任何處理，繼續輪詢任務表，直至到達設定的同步時間。

優選的，計算需要的線程數時，

當數據量X小于最大處理數N時，自動分配一個線程處理；