[發(fā)明專利]數(shù)據(jù)增量同步方法和系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202110687848.6
• 申請日: 2021-06-21
• 公開（公告）號: CN113626516A
• 公開（公告）日: 2021-11-09
• 發(fā)明（設(shè)計）人: 冷曉寧;安平凱
• 申請（專利權(quán)）人: 中科恒運股份有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27
• 代理公司: 石家莊國為知識產(chǎn)權(quán)事務(wù)所 13120
• 代理人: 付曉娣

本發(fā)明提供了一種數(shù)據(jù)增量同步方法和系統(tǒng)，該方法應(yīng)用于一種數(shù)據(jù)增量同步系統(tǒng)，包括第一數(shù)據(jù)庫，服務(wù)器，終端集合和第二數(shù)據(jù)庫該方法包括：服務(wù)器從第一數(shù)據(jù)庫獲取第一數(shù)據(jù)庫的日志，對第一數(shù)據(jù)庫的日志進(jìn)行解析并存儲解析結(jié)果；終端集合通過服務(wù)器判斷第一數(shù)據(jù)庫的數(shù)據(jù)是否發(fā)生變更；若終端集合判斷第一數(shù)據(jù)庫的數(shù)據(jù)發(fā)生變更，則終端集合中的每個終端，根據(jù)預(yù)設(shè)的負(fù)載均衡和信任度策略，選取預(yù)設(shè)數(shù)量的終端作為執(zhí)行終端；執(zhí)行終端從服務(wù)器獲取解析結(jié)果所對應(yīng)的第一數(shù)據(jù)庫中發(fā)生變更的數(shù)據(jù)，并將第一數(shù)據(jù)庫中發(fā)生變更的數(shù)據(jù)增量同步到第二數(shù)據(jù)庫中。本發(fā)明能夠提高數(shù)據(jù)增量同步的效率和安全性。

技術(shù)領(lǐng)域

本發(fā)明屬于計算機(jī)技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)增量同步的方法和系統(tǒng)。

背景技術(shù)

互聯(lián)網(wǎng)的高速發(fā)展促進(jìn)了傳統(tǒng)產(chǎn)業(yè)的轉(zhuǎn)型與升級，在與互聯(lián)網(wǎng)融合的過程中，越來越多的企事業(yè)單位、政府政務(wù)系統(tǒng)等都實現(xiàn)了業(yè)務(wù)的信息化。但是各個信息化系統(tǒng)并不統(tǒng)一，各個系統(tǒng)的數(shù)據(jù)庫之間很難進(jìn)行數(shù)據(jù)共享。

但是，在很多應(yīng)用場景下，需要進(jìn)行不同數(shù)據(jù)庫間的數(shù)據(jù)共享和數(shù)據(jù)同步，其中，數(shù)據(jù)同步是指當(dāng)一個數(shù)據(jù)庫中的數(shù)據(jù)發(fā)生變更后，通常需要將變更同步到其他數(shù)據(jù)庫，以保證整個系統(tǒng)中數(shù)據(jù)的一致性。

現(xiàn)有的數(shù)據(jù)同步方法分為全量同步和增量同步兩類。全量同步是指從源數(shù)據(jù)庫中讀取所有的數(shù)據(jù)，然后將這些數(shù)據(jù)進(jìn)行一定的轉(zhuǎn)化后應(yīng)用到目標(biāo)數(shù)據(jù)庫，這種方法雖然實現(xiàn)簡單，但耗時較長，數(shù)據(jù)的實時一致性較差。增量同步是指每次只同步在上一次同步之后發(fā)生變更的數(shù)據(jù)，用時較少，數(shù)據(jù)的實時一致性較好。

如何提高數(shù)據(jù)增量同步的效率和安全性，是現(xiàn)有的增量同步方案中急需解決的問題。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明提供了一種數(shù)據(jù)增量同步方法和系統(tǒng)，能夠提高數(shù)據(jù)增量同步的效率和安全性。

本發(fā)明實施例的第一方面提供了一種數(shù)據(jù)增量同步方法，該方法應(yīng)用于一種數(shù)據(jù)增量同步系統(tǒng)，該系統(tǒng)包括第一數(shù)據(jù)庫，服務(wù)器，終端集合和第二數(shù)據(jù)庫，其中所述終端集合包含N個終端，N大于等于2，所述服務(wù)器分別和所述第一數(shù)據(jù)庫、所述終端集合通信，所述終端集合還和所述第二數(shù)據(jù)庫通信，該方法包括：

所述服務(wù)器從所述第一數(shù)據(jù)庫獲取所述第一數(shù)據(jù)庫的日志，對所述第一數(shù)據(jù)庫的日志進(jìn)行解析并存儲解析結(jié)果；

所述終端集合通過所述服務(wù)器判斷所述第一數(shù)據(jù)庫的數(shù)據(jù)是否發(fā)生變更，其中，所述服務(wù)器根據(jù)所述解析結(jié)果判斷所述第一數(shù)據(jù)庫是否發(fā)生數(shù)據(jù)變更；

若所述終端集合判斷所述第一數(shù)據(jù)庫的數(shù)據(jù)發(fā)生變更，則所述終端集合中的每個終端，根據(jù)預(yù)設(shè)的負(fù)載均衡和信任度策略，選取預(yù)設(shè)數(shù)量的終端作為執(zhí)行終端；

所述執(zhí)行終端從所述服務(wù)器獲取所述解析結(jié)果所對應(yīng)的所述第一數(shù)據(jù)庫中發(fā)生變更的數(shù)據(jù)，并將所述第一數(shù)據(jù)庫中發(fā)生變更的數(shù)據(jù)增量同步到所述第二數(shù)據(jù)庫中。

第二方面，本發(fā)明實施例提供了一種數(shù)據(jù)增量同步系統(tǒng)，該系統(tǒng)包括第一數(shù)據(jù)庫，服務(wù)器，終端集合和第二數(shù)據(jù)庫，其中所述終端集合包含N個終端，N大于等于2，所述服務(wù)器分別和所述第一數(shù)據(jù)庫、所述終端集合通信，所述終端集合還和所述第二數(shù)據(jù)庫通信，所述數(shù)據(jù)增量同步系統(tǒng)用于實現(xiàn)如上第一方面所述方法的步驟。

本發(fā)明實施例提供一種數(shù)據(jù)增量同步方法和系統(tǒng)，通過預(yù)設(shè)的負(fù)載均衡和信任度策略，選取預(yù)設(shè)數(shù)量的終端作為執(zhí)行終端，由執(zhí)行終端完成將增量數(shù)據(jù)同步到第二數(shù)據(jù)庫的工作，提高了數(shù)據(jù)增量同步的效率和安全性。

附圖說明

為了更清楚地說明本發(fā)明實施例中的技術(shù)方案，下面將對實施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動性的前提下，還可以根據(jù)這些附圖獲得其他的附圖。

圖1是本發(fā)明實施例提供的數(shù)據(jù)增量同步系統(tǒng)的示意圖；