[發(fā)明專利]一種物理隔離條件下不同數(shù)據(jù)庫間數(shù)據(jù)同步的方法

無效

• 申請(qǐng)?zhí)枺?/td>: 200910091237.4
• 申請(qǐng)日: 2009-08-13
• 公開（公告）號(hào): CN101620624A
• 公開（公告）日: 2010-01-06
• 發(fā)明（設(shè)計(jì)）人: 蔣勇;范蕓;陳進(jìn);孫溦;趙偉;張樹芳;余協(xié)力;陳宇;吳曉飛;蘇小平;杜曉玲;張利華;劉冬妮
• 申請(qǐng)（專利權(quán)）人: 公安部第一研究所;北京中盾安全技術(shù)開發(fā)公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 北京中海智圣知識(shí)產(chǎn)權(quán)代理有限公司
• 代理人: 曾永珠

技術(shù)領(lǐng)域

本發(fā)明屬于數(shù)據(jù)庫間數(shù)據(jù)同步的方法，尤其是指一種物理隔離條件下不同數(shù)據(jù)庫間數(shù)據(jù)同步的方法。

背景技術(shù)

目前，現(xiàn)有的數(shù)據(jù)庫間的數(shù)據(jù)同步都是在聯(lián)機(jī)環(huán)境下進(jìn)行的，而在安全性要求高，內(nèi)外網(wǎng)物理隔離的不同數(shù)據(jù)庫間的數(shù)據(jù)同步，一般都采用移動(dòng)介質(zhì)拷貝數(shù)據(jù)文件，然后直接通過數(shù)據(jù)庫提供的命令工具導(dǎo)入。這種直接通過命令工具進(jìn)行數(shù)據(jù)導(dǎo)入操作中如果導(dǎo)入出錯(cuò)，則需要重新導(dǎo)入整個(gè)數(shù)據(jù)文件，而且導(dǎo)入過程通常在業(yè)務(wù)量較少的時(shí)段進(jìn)行，目的是避免操作錯(cuò)誤可能導(dǎo)致的目標(biāo)數(shù)據(jù)庫異常，破壞穩(wěn)定性的要求。

在數(shù)據(jù)庫間物理隔離、數(shù)據(jù)量較大的情況下，通常的操作方法是：

1.將外網(wǎng)的所有數(shù)據(jù)導(dǎo)出成文件形式，拷貝到內(nèi)網(wǎng)，再導(dǎo)入到內(nèi)網(wǎng)目標(biāo)數(shù)據(jù)庫中。

2.將外網(wǎng)的數(shù)據(jù)結(jié)構(gòu)導(dǎo)出成文件形式，并和數(shù)據(jù)物理存儲(chǔ)文件一起拷貝到內(nèi)網(wǎng)，并導(dǎo)入到目標(biāo)數(shù)據(jù)庫中。

以上兩種操作方法比較簡單直接。從源數(shù)據(jù)庫到目標(biāo)數(shù)據(jù)庫，數(shù)據(jù)的寫入是一次性的，雖然考慮到了操作的事務(wù)性，但如果數(shù)據(jù)量比較大，則失敗一次將會(huì)浪費(fèi)很多時(shí)間以及系統(tǒng)資源，在嚴(yán)重錯(cuò)誤發(fā)生時(shí)，還有可能造成目標(biāo)數(shù)據(jù)庫的整體穩(wěn)定性。

發(fā)明內(nèi)容

為保證目標(biāo)數(shù)據(jù)庫在導(dǎo)入數(shù)據(jù)時(shí)的穩(wěn)定性，本發(fā)明的數(shù)據(jù)同步方法采用建立臨時(shí)的中間數(shù)據(jù)庫，數(shù)據(jù)同步時(shí)將源數(shù)據(jù)庫的數(shù)據(jù)通過中間數(shù)據(jù)庫的過渡作為緩沖，中間數(shù)據(jù)庫與目標(biāo)數(shù)據(jù)庫之間的數(shù)據(jù)傳輸轉(zhuǎn)化為聯(lián)網(wǎng)狀態(tài)下的數(shù)據(jù)同步，從而在不損失數(shù)據(jù)穩(wěn)定性以及同步效率之間達(dá)到折中平衡。

本發(fā)明一種物理隔離條件下不同數(shù)據(jù)庫間數(shù)據(jù)同步的方法主要包括在外網(wǎng)源數(shù)據(jù)庫中配置外網(wǎng)元數(shù)據(jù)表，在內(nèi)網(wǎng)配置中間數(shù)據(jù)庫和內(nèi)網(wǎng)元數(shù)據(jù)表，本發(fā)明的方法包括以下操作步驟：

步驟一，在外網(wǎng)中根據(jù)外網(wǎng)元數(shù)據(jù)表規(guī)定的格式和內(nèi)容對(duì)源數(shù)據(jù)庫中需要傳輸?shù)臄?shù)據(jù)規(guī)范化處理，規(guī)范化后的業(yè)務(wù)數(shù)據(jù)包括需要操作的數(shù)據(jù)的表名稱和各個(gè)表中需要同步的數(shù)據(jù)字段，以及進(jìn)行操作時(shí)的時(shí)間戳；

步驟二，外網(wǎng)規(guī)范化后的業(yè)務(wù)數(shù)據(jù)導(dǎo)入U(xiǎn)盤中；

步驟三，U盤中的業(yè)務(wù)數(shù)據(jù)導(dǎo)入內(nèi)網(wǎng)的中間數(shù)據(jù)庫；

步驟四，在內(nèi)網(wǎng)中間數(shù)據(jù)庫中的業(yè)務(wù)數(shù)據(jù)根據(jù)用戶的最終需求導(dǎo)入目標(biāo)數(shù)據(jù)庫，導(dǎo)入過程通過數(shù)據(jù)庫多會(huì)話操作實(shí)現(xiàn)多組數(shù)據(jù)同時(shí)進(jìn)行，操作過程中出現(xiàn)的異常操作記錄入日志文件，查看日志文件，再次導(dǎo)入操作異常的業(yè)務(wù)數(shù)據(jù)。

通過上面數(shù)據(jù)同步方法的操作步驟，可以避免數(shù)據(jù)直接導(dǎo)入時(shí)產(chǎn)生錯(cuò)誤而導(dǎo)致目標(biāo)數(shù)據(jù)庫的穩(wěn)定性的破壞，通過建立的臨時(shí)中間數(shù)據(jù)庫，實(shí)現(xiàn)了不同網(wǎng)絡(luò)環(huán)境數(shù)據(jù)庫間同步的緩沖，同時(shí)滿足了數(shù)據(jù)的同步和完整性要求，并通過設(shè)計(jì)外網(wǎng)元數(shù)據(jù)表和內(nèi)網(wǎng)元數(shù)據(jù)表，提高操作的靈活性。本方法在安全性要求高，需要內(nèi)外網(wǎng)物理隔離，且數(shù)據(jù)量較大的不同數(shù)據(jù)庫間的數(shù)據(jù)同步中能夠穩(wěn)定的工作。

附圖說明

圖1為本發(fā)明一種物理隔離條件下不同數(shù)據(jù)庫間數(shù)據(jù)同步的方法的結(jié)構(gòu)示意圖；

圖2為本發(fā)明一種物理隔離條件下不同數(shù)據(jù)庫間數(shù)據(jù)同步的方法的操作流程圖。

具體實(shí)施方式

圖1為本發(fā)明一種物理隔離條件下不同數(shù)據(jù)庫間數(shù)據(jù)同步的方法的具體實(shí)施結(jié)構(gòu)示意圖，操作過程中將外部網(wǎng)的源數(shù)據(jù)庫中的業(yè)務(wù)數(shù)據(jù)同步到內(nèi)部網(wǎng)的目標(biāo)數(shù)據(jù)庫，圖中箭頭方向?yàn)闃I(yè)務(wù)數(shù)據(jù)的流向。

圖2為本發(fā)明具體實(shí)施時(shí)操作的完整流程圖，具體操作步驟為：

1.按照外網(wǎng)元數(shù)據(jù)表的規(guī)定將源數(shù)據(jù)庫中需要傳輸?shù)臉I(yè)務(wù)數(shù)據(jù)的內(nèi)容和格式進(jìn)行規(guī)范化處理并導(dǎo)出到U盤中；

2.U盤中的業(yè)務(wù)數(shù)據(jù)導(dǎo)入中間數(shù)據(jù)庫；

3.依據(jù)用戶的最終需求設(shè)定內(nèi)網(wǎng)元數(shù)據(jù)表，對(duì)中間數(shù)據(jù)庫中的待傳輸?shù)臄?shù)據(jù)進(jìn)行校驗(yàn)，并分組整理，使得導(dǎo)入時(shí)可以多組同時(shí)進(jìn)行，提高工作效率；

4.根據(jù)內(nèi)網(wǎng)元數(shù)據(jù)表的規(guī)定，通過數(shù)據(jù)庫的多會(huì)話操作實(shí)現(xiàn)多組數(shù)據(jù)表同時(shí)從中間數(shù)據(jù)庫導(dǎo)入到目標(biāo)數(shù)據(jù)庫；

5.操作沒有出現(xiàn)異常的，在數(shù)據(jù)導(dǎo)入完成后清空中間數(shù)據(jù)庫，結(jié)束數(shù)據(jù)同步工作；

6.在數(shù)據(jù)導(dǎo)入過程中出現(xiàn)的異常操作記錄入日志文件，通過查看日志文件，再次向目標(biāo)數(shù)據(jù)庫導(dǎo)入未成功導(dǎo)入部分的數(shù)據(jù)，同時(shí)可以直接清空中間數(shù)據(jù)庫中成功導(dǎo)入的部分?jǐn)?shù)據(jù)，直至全部數(shù)據(jù)導(dǎo)入成功結(jié)束數(shù)據(jù)同步工作。