[發(fā)明專利]一種數(shù)據(jù)復(fù)制一致性檢查的方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010567399.7
• 申請(qǐng)日: 2020-06-19
• 公開（公告）號(hào): CN111737260A
• 公開（公告）日: 2020-10-02
• 發(fā)明（設(shè)計(jì)）人: 馬紅
• 申請(qǐng)（專利權(quán)）人: 中國銀行股份有限公司
• 主分類號(hào): G06F16/22
• 分類號(hào): G06F16/22;G06F16/27
• 代理公司: 北京三友知識(shí)產(chǎn)權(quán)代理有限公司 11127
• 代理人: 王天堯;湯在彥

本發(fā)明提出了一種數(shù)據(jù)復(fù)制一致性檢查的方法及系統(tǒng)，其中，該方法包括：根據(jù)預(yù)設(shè)順序?qū)υ聪到y(tǒng)中每條原始數(shù)據(jù)，分別利用第一哈希算法計(jì)算得到第一哈希值；將第一哈希值連接組成一字節(jié)流，利用第二哈希算法計(jì)算得到第二哈希值；根據(jù)相同的預(yù)設(shè)順序?qū)δ繕?biāo)系統(tǒng)中復(fù)制的每條數(shù)據(jù)，分別利用第一哈希算法計(jì)算得到第三哈希值；將第三哈希值連接組成一字節(jié)流，利用第二哈希算法計(jì)算得到第四哈希值；比較第二哈希值與第四哈希值，如果相等則判定數(shù)據(jù)一致，如果不相等則判定數(shù)據(jù)不一致。利用本發(fā)明提出的數(shù)據(jù)復(fù)制一致性檢查的方法及系統(tǒng)，可以在確保一致性檢查準(zhǔn)確性的前提下，降低傳輸數(shù)據(jù)量、計(jì)算量并且縮短比對(duì)處理的耗時(shí)。

技術(shù)領(lǐng)域

本發(fā)明涉及分布式計(jì)算技術(shù)領(lǐng)域，尤指一種數(shù)據(jù)復(fù)制一致性檢查的方法及系統(tǒng)。

背景技術(shù)

在分布式計(jì)算領(lǐng)域，廣泛通過數(shù)據(jù)復(fù)制技術(shù)將數(shù)據(jù)從源系統(tǒng)同步到目標(biāo)系統(tǒng)。為確保數(shù)據(jù)復(fù)制的正確性，需要定期檢查目標(biāo)系統(tǒng)與源系統(tǒng)復(fù)制數(shù)據(jù)是否一致。

為了檢查數(shù)據(jù)復(fù)制一致性，最直接的方法是全量數(shù)據(jù)比對(duì)。具體方法是：從源系統(tǒng)讀取數(shù)據(jù)，將數(shù)據(jù)發(fā)送到目標(biāo)系統(tǒng)，逐一比對(duì)。

另外，還有一種可選方法是全量數(shù)據(jù)計(jì)算哈希值，具體方法是：從源系統(tǒng)按特定順序(需要嚴(yán)格排序)讀取數(shù)據(jù)，將所有數(shù)據(jù)連接起來組成一個(gè)字節(jié)流，針對(duì)該字節(jié)流計(jì)算哈希值Hasha；在目標(biāo)系統(tǒng)，用同樣方法計(jì)算哈希值Hashb，并與源系統(tǒng)得到的Hasha比較，如果二者相等，則認(rèn)為數(shù)據(jù)一致，否則認(rèn)為數(shù)據(jù)不一致。

綜上來看，第一種方式通過全量數(shù)據(jù)比對(duì)，該方法會(huì)存在傳輸數(shù)據(jù)量比較大、比對(duì)耗時(shí)較長等問題；第二種方式通過全量數(shù)據(jù)計(jì)算哈希值進(jìn)行比對(duì)，該方式會(huì)存在計(jì)算量太大等問題。

因此，亟需一種可以克服上述問題，降低傳輸數(shù)據(jù)量、耗時(shí)短且計(jì)算量較小的檢查目標(biāo)系統(tǒng)與源系統(tǒng)復(fù)制數(shù)據(jù)是否一致的方案。

發(fā)明內(nèi)容

為克服上述問題，本發(fā)明提出了一種數(shù)據(jù)復(fù)制一致性檢查的方法及系統(tǒng)，該方法及系統(tǒng)分別對(duì)源系統(tǒng)及目標(biāo)系統(tǒng)的每條數(shù)據(jù)采用哈希算法計(jì)算哈希值，進(jìn)而將該些哈希值連接組成一個(gè)字節(jié)流再次利用哈希算法計(jì)算哈希值，通過比較該計(jì)算結(jié)果判斷數(shù)據(jù)復(fù)制的一致性。其中所采用的兩種哈希算法可以根據(jù)所要計(jì)算的數(shù)據(jù)的特點(diǎn)，采用不同類型的哈希算法，從而降低計(jì)算量；整體方案在實(shí)施過程中相較于現(xiàn)有技術(shù)可以降低傳輸數(shù)據(jù)量、縮短處理耗時(shí)。

在本發(fā)明的第一方面，提出了一種數(shù)據(jù)復(fù)制一致性檢查的方法，該方法包括：

根據(jù)預(yù)設(shè)順序?qū)υ聪到y(tǒng)中每條原始數(shù)據(jù)，分別利用第一哈希算法計(jì)算得到第一哈希值；

將所述第一哈希值連接組成一字節(jié)流，利用第二哈希算法計(jì)算得到第二哈希值；

根據(jù)相同的所述預(yù)設(shè)順序?qū)δ繕?biāo)系統(tǒng)中復(fù)制的每條數(shù)據(jù)，分別利用第一哈希算法計(jì)算得到第三哈希值；

將所述第三哈希值連接組成一字節(jié)流，利用第二哈希算法計(jì)算得到第四哈希值；

比較所述第二哈希值與第四哈希值，如果相等則判定數(shù)據(jù)一致，如果不相等則判定數(shù)據(jù)不一致。

在本發(fā)明的第二方面，提出了一種數(shù)據(jù)復(fù)制一致性檢查的系統(tǒng)，該系統(tǒng)包括：

源系統(tǒng)第一計(jì)算模塊，用于根據(jù)預(yù)設(shè)順序?qū)υ聪到y(tǒng)中每條原始數(shù)據(jù)，分別利用第一哈希算法計(jì)算得到第一哈希值；

源系統(tǒng)第二計(jì)算模塊，用于將所述第一哈希值連接組成一字節(jié)流，利用第二哈希算法計(jì)算得到第二哈希值；

目標(biāo)系統(tǒng)第一計(jì)算模塊，用于根據(jù)相同的所述預(yù)設(shè)順序?qū)δ繕?biāo)系統(tǒng)中復(fù)制的每條數(shù)據(jù)，分別利用第一哈希算法計(jì)算得到第三哈希值；

目標(biāo)系統(tǒng)第二計(jì)算模塊，用于將所述第三哈希值連接組成一字節(jié)流，利用第二哈希算法計(jì)算得到第四哈希值；