[發(fā)明專利]數(shù)據(jù)復(fù)制方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201611241852.5
• 申請(qǐng)日: 2016-12-29
• 公開(kāi)（公告）號(hào): CN106657350A
• 公開(kāi)（公告）日: 2017-05-10
• 發(fā)明（設(shè)計(jì)）人: 張夢(mèng)佼;張煉;李謙;張敏
• 申請(qǐng)（專利權(quán)）人: 中國(guó)銀聯(lián)股份有限公司
• 主分類號(hào): H04L29/08
• 分類號(hào): H04L29/08;H04L29/06
• 代理公司: 北京三友知識(shí)產(chǎn)權(quán)代理有限公司11127
• 代理人: 王濤

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)實(shí)時(shí)處理技術(shù)，特別涉及一種數(shù)據(jù)復(fù)制方法及裝置。

背景技術(shù)

對(duì)于處理實(shí)時(shí)數(shù)據(jù)的IT系統(tǒng)，經(jīng)常建設(shè)有異地雙活生產(chǎn)中心及或異地災(zāi)備中心。在這類系統(tǒng)中，經(jīng)常需要在信息中心內(nèi)部不同生產(chǎn)系統(tǒng)之間、或異地不同信息中心之間進(jìn)行連續(xù)的數(shù)據(jù)復(fù)制。

數(shù)據(jù)復(fù)制技術(shù)具有實(shí)時(shí)性高、數(shù)據(jù)丟失少或零丟失、容災(zāi)恢復(fù)快、投資較高等特點(diǎn)。現(xiàn)有的數(shù)據(jù)復(fù)制技術(shù)實(shí)現(xiàn)根據(jù)數(shù)據(jù)復(fù)制的層次可以分為：存儲(chǔ)系統(tǒng)層數(shù)據(jù)復(fù)制、虛擬存儲(chǔ)數(shù)據(jù)復(fù)制、操作系統(tǒng)數(shù)據(jù)復(fù)制和應(yīng)用層數(shù)據(jù)復(fù)制。

存儲(chǔ)系統(tǒng)層的數(shù)據(jù)復(fù)制：對(duì)于主機(jī)的操作系統(tǒng)是完全透明的，是對(duì)于將來(lái)增加新的操作平臺(tái)，可不用增加任何復(fù)制軟件的投資，即可實(shí)現(xiàn)復(fù)制。這樣管理比較簡(jiǎn)單，最大程度保護(hù)了用戶的投資，達(dá)到充分利用資源的目的。基于存儲(chǔ)的復(fù)制一般都是采ATM或光纖通道作為遠(yuǎn)端的鏈路連接，不僅可以做到異步復(fù)制，更可以做到同步復(fù)制，使兩端數(shù)據(jù)可做到實(shí)時(shí)同步的目的，保證了數(shù)據(jù)的一致性。但是由于基于存儲(chǔ)是由存儲(chǔ)硬件廠商提供的，在兼容性方面有局限性。用戶要使用同一廠商的devices，給用戶造成的選擇面太小，成本容易提高，并且對(duì)線路帶寬的要求通常也較高。

虛擬存儲(chǔ)復(fù)制技術(shù)：伴隨著存儲(chǔ)局域網(wǎng)的出現(xiàn)引入的，通過(guò)構(gòu)建虛擬存儲(chǔ)上實(shí)現(xiàn)數(shù)據(jù)復(fù)制。通過(guò)存儲(chǔ)虛擬化設(shè)備實(shí)現(xiàn)卷鏡像復(fù)制功能的優(yōu)勢(shì)在于操作由存儲(chǔ)虛擬化設(shè)備來(lái)完成、壓力集中的存儲(chǔ)虛擬化設(shè)備上，不需要主機(jī)參與，數(shù)據(jù)復(fù)制進(jìn)程安全穩(wěn)定。但是該技術(shù)需要增加專用存儲(chǔ)虛擬化設(shè)備，有的需要在主機(jī)端需要安裝存儲(chǔ)虛擬化設(shè)備的客戶端軟件，比如UIT SVM；有的需要依賴高端智能交換機(jī)，比如EMC VSM。目前使用這種技術(shù)的產(chǎn)品還不是很多，成熟性還有待提高，具有這種功能的專用設(shè)備價(jià)格也相對(duì)較高，所以采用這種方案的用戶比較少。

操作系統(tǒng)層數(shù)據(jù)復(fù)制：主要通過(guò)操作系統(tǒng)或者數(shù)據(jù)卷管理器來(lái)實(shí)現(xiàn)對(duì)數(shù)據(jù)的遠(yuǎn)程復(fù)制。這種復(fù)制技術(shù)要求本地系統(tǒng)和遠(yuǎn)端系統(tǒng)的主機(jī)是同構(gòu)的，其實(shí)現(xiàn)方式是基于主機(jī)的數(shù)據(jù)復(fù)制，容災(zāi)方式工作在主機(jī)的卷管理器這一層，通過(guò)磁盤卷的鏡像或復(fù)制，實(shí)現(xiàn)數(shù)據(jù)的容災(zāi)。這種方式也不需要在兩邊采用同樣的存儲(chǔ)設(shè)備，具有較大的靈活性，但是復(fù)制功能會(huì)多少占用一些主機(jī)的CPU資源，對(duì)主機(jī)的性能有一定的影響。

應(yīng)用層數(shù)據(jù)復(fù)制：大多數(shù)IT系統(tǒng)使用的數(shù)據(jù)復(fù)制應(yīng)用僅針對(duì)單個(gè)數(shù)據(jù)源對(duì)單個(gè)目標(biāo)端，存在部署不統(tǒng)一，服務(wù)不通用，數(shù)據(jù)庫(kù)耦合性較強(qiáng)的問(wèn)題；對(duì)于單個(gè)數(shù)據(jù)源需要向多目標(biāo)端復(fù)制數(shù)據(jù)的需求，往往需要同一數(shù)據(jù)需要從源庫(kù)獲取多次，對(duì)源庫(kù)影響較大。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供了一種數(shù)據(jù)復(fù)制方法及裝置，以獨(dú)立的執(zhí)行不同的數(shù)據(jù)復(fù)制任務(wù)，使得各個(gè)數(shù)據(jù)復(fù)制任務(wù)互不影響，便于管理和運(yùn)維。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例提供了一種數(shù)據(jù)復(fù)制方法，該數(shù)據(jù)復(fù)制方法包括：

接收數(shù)據(jù)發(fā)布端的數(shù)據(jù)發(fā)布請(qǐng)求，所述數(shù)據(jù)發(fā)布請(qǐng)求包括所述數(shù)據(jù)發(fā)布端從源數(shù)據(jù)庫(kù)中讀取的至少部分發(fā)布數(shù)據(jù)；

向數(shù)據(jù)訂閱端發(fā)送發(fā)布數(shù)據(jù)分發(fā)請(qǐng)求，根據(jù)不同數(shù)據(jù)訂閱端的訂閱需求并行向所述數(shù)據(jù)訂閱端發(fā)送所述發(fā)布數(shù)據(jù)。

一實(shí)施例中，該數(shù)據(jù)復(fù)制方法還包括：將所述發(fā)布數(shù)據(jù)緩存至本地。

一實(shí)施例中，根據(jù)不同數(shù)據(jù)訂閱端的訂閱需求并發(fā)向所述訂閱端發(fā)送所述發(fā)布數(shù)據(jù)，包括：

根據(jù)不同數(shù)據(jù)訂閱端的訂閱需求進(jìn)行對(duì)應(yīng)的形變處理，將形變處理后的所述發(fā)布數(shù)據(jù)并行發(fā)送至不同的所述數(shù)據(jù)訂閱端。

一實(shí)施例中，根據(jù)所述數(shù)據(jù)發(fā)布請(qǐng)求向所述數(shù)據(jù)發(fā)布端發(fā)送數(shù)據(jù)接收應(yīng)答請(qǐng)求，以使所述數(shù)據(jù)發(fā)布端繼續(xù)發(fā)送剩余的發(fā)布數(shù)據(jù)。

一實(shí)施例中，該數(shù)據(jù)復(fù)制方法還包括：根據(jù)所述數(shù)據(jù)發(fā)布端和/或所述數(shù)據(jù)訂閱端的接入請(qǐng)求進(jìn)行接入認(rèn)證，以建立與所述數(shù)據(jù)發(fā)布端和/或所述數(shù)據(jù)訂閱端的連接，其中，所述接入請(qǐng)求中包括：端口、地址及進(jìn)程編號(hào)。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例還提供了一種數(shù)據(jù)復(fù)制方法，該數(shù)據(jù)復(fù)制方法包括：

向數(shù)據(jù)分發(fā)服務(wù)端發(fā)送數(shù)據(jù)發(fā)布請(qǐng)求，所述數(shù)據(jù)發(fā)布請(qǐng)求包括所述數(shù)據(jù)發(fā)布端從源數(shù)據(jù)庫(kù)中讀取的部分發(fā)布數(shù)據(jù)；

若接收到所述數(shù)據(jù)分發(fā)服務(wù)端發(fā)送的數(shù)據(jù)接收應(yīng)答請(qǐng)求，基于所述數(shù)據(jù)接收應(yīng)答請(qǐng)求向所述數(shù)據(jù)分發(fā)服務(wù)端發(fā)送剩余的發(fā)布數(shù)據(jù)。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例還提供了一種數(shù)據(jù)復(fù)制方法，該數(shù)據(jù)復(fù)制方法包括：

接收數(shù)據(jù)分發(fā)服務(wù)端發(fā)送的發(fā)布數(shù)據(jù)分發(fā)請(qǐng)求；

根據(jù)所述發(fā)布數(shù)據(jù)分發(fā)請(qǐng)求從所述數(shù)據(jù)分發(fā)服務(wù)端的緩存中獲取對(duì)應(yīng)的發(fā)布數(shù)據(jù)，并將所述發(fā)布數(shù)據(jù)保持至目標(biāo)數(shù)據(jù)庫(kù)。

為了實(shí)現(xiàn)上述目的，本發(fā)明實(shí)施例還提供了一種數(shù)據(jù)復(fù)制裝置，該數(shù)據(jù)復(fù)制裝置包括：