[發明專利]一種數據庫的數據同步方法、裝置、設備及存儲介質

在審

• 申請號: 202010634655.X
• 申請日: 2020-07-02
• 公開（公告）號: CN111767346A
• 公開（公告）日: 2020-10-13
• 發明（設計）人: 陳海彬
• 申請（專利權）人: 深圳新貝奧科技有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27
• 代理公司: 深圳市特訊知識產權代理事務所(普通合伙) 44653
• 代理人: 何明生;黃彧

本發明提供了一種數據庫的數據同步方法、裝置、設備及存儲介質，此方法包括預先對同步數據的環境進行表配置和字段配置以及基于表配置和字段配置將源表中需要同步的數據同步至目標表中。該同步數據包括源表中需要同步的數據和目標表中被同步的數據，該表配置包括對數據進行同步的同步類型，該字段配置包括對字段進行格式轉換的轉換方法。此方法由配置完成數據同步，方式簡單，并且，利用配置的同步類型實現多種同步形式進行數據同步，利用配置的轉換方法實現對字段的格式轉換，實現在數據同步過程中，對字段進行格式轉換、邏輯運算。

技術領域

本發明涉及互聯網技術領域，特別是涉及一種數據庫的數據同步方法、裝置、設備及存儲介質。

背景技術

目前，數據庫中，表對表之間的數據同步需要做繁瑣的字段映射開發，同步邏輯開發以及轉換關系的開發。并且，在數據同步過程中，不能對字段進行格式轉換、邏輯運算、并以多種同步形式進行數據同步。

因此，現有技術有待改進和發展。

發明內容

為了解決上述現有技術的缺陷和不足，本發明提供了一種數據庫的數據同步方法、裝置、設備及存儲介質，用于解決現有技術中數據同步需做繁瑣的各項開發的問題，以及用于解決現有技術在數據同步過程中不能對字段進行格式轉換、邏輯運算、并以多種同步形式進行數據同步的問題。

本發明所采用的技術方案如下：

一方面，本發明提供了一種數據庫的數據同步方法，包括：

預先對同步數據的環境進行表配置和字段配置，其中，所述同步數據包括源表中需要同步的數據和目標表中被同步的數據，所述表配置包括對數據進行同步的同步類型，所述字段配置包括對字段進行格式轉換的轉換方法；

基于表配置和字段配置將源表中需要同步的數據同步至目標表中。

具體的，所述同步類型包括O類型、C類型、I類型、M類型和F類型；

其中，O類型是基于流水ID表，通過讀取配置的方式進行數據同步；

C類型是基于Control表進行數據同步；

I類型是基于時間戳進行增量同步，并且，若目標數據庫已經存在需要同步的數據的ID記錄，則不會進行數據同步，否則，復制需要同步的數據至目標表中；

M類型是基于配置的取值SQL進行數據同步，并在數據同步后，會根據同步后的數據ID將源數據庫中對應的數據刪除；

F類型是基于配置中的目標表信息，先刪除目標表所有數據內容，再將源表的數據全部同步至目標表。

優選地，所述數據庫的數據同步方法，在所述基于表配置和字段配置將源表中需要同步的數據同步至目標表中之前，還包括：

基于定時任務觸發執行數據同步，并調用相應的表配置和字段配置；

獲取定時任務中同步數據的運行配置信息；

對定時任務中的業務代碼進行處理；

判斷當前定時任務是否處于開啟狀態，若是，則

將配置信息組裝成通用消息模板發布至消息列隊。

優選地，所述基于表配置和字段配置將源表中需要同步的數據同步至目標表中，是基于消息列隊中對應的數據同步消息觸發執行，具體包括如下步驟：

根據預先表配置中的同步類型，提取同步數據；

判斷源表中需要同步的數據是否提取，若是，則

根據預先字段配置中的轉換方法對源表中需要同步的數據進行格式轉換；