[發(fā)明專利]一種數(shù)據(jù)庫(kù)遷移方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201911276004.1
• 申請(qǐng)日: 2019-12-12
• 公開（公告）號(hào): CN111104392B
• 公開（公告）日: 2021-11-02
• 發(fā)明（設(shè)計(jì)）人: 張棟芳
• 申請(qǐng)（專利權(quán)）人: 京東數(shù)字科技控股有限公司
• 主分類號(hào): G06F16/21
• 分類號(hào): G06F16/21;G06F16/23;G06F16/27
• 代理公司: 北京華夏泰和知識(shí)產(chǎn)權(quán)代理有限公司 11662
• 代理人: 王衛(wèi)忠;李雪

1.一種數(shù)據(jù)庫(kù)遷移方法，其特征在于，包括：

獲取源數(shù)據(jù)庫(kù)中的待遷移數(shù)據(jù)；

確定將所述待遷移數(shù)據(jù)遷移到目標(biāo)數(shù)據(jù)庫(kù)后，所述目標(biāo)數(shù)據(jù)庫(kù)中增加的第一遷入數(shù)據(jù)；其中，所述目標(biāo)數(shù)據(jù)庫(kù)至少包括一個(gè)；

根據(jù)所述待遷移數(shù)據(jù)以及第一遷入數(shù)據(jù)進(jìn)行遷移前后的數(shù)據(jù)量一致性校驗(yàn)；

還包括：

獲取在對(duì)所述待遷移數(shù)據(jù)進(jìn)行遷移的過(guò)程中寫入所述源數(shù)據(jù)庫(kù)中的增量數(shù)據(jù)；

確定將所述增量數(shù)據(jù)遷移到所述目標(biāo)數(shù)據(jù)庫(kù)后，所述目標(biāo)數(shù)據(jù)庫(kù)中增加的第二遷入數(shù)據(jù)；

根據(jù)所述增量數(shù)據(jù)以及第二遷入數(shù)據(jù)進(jìn)行所述增量數(shù)據(jù)的遷移結(jié)果校驗(yàn)；

所述獲取在對(duì)所述待遷移數(shù)據(jù)進(jìn)行遷移的過(guò)程中寫入所述源數(shù)據(jù)庫(kù)中的增量數(shù)據(jù)，包括：

獲取所述源數(shù)據(jù)庫(kù)的數(shù)據(jù)庫(kù)信息；

根據(jù)所述數(shù)據(jù)庫(kù)信息注冊(cè)得到所述源數(shù)據(jù)庫(kù)的從庫(kù)；

通過(guò)所述從庫(kù)從所述源數(shù)據(jù)庫(kù)中獲取第二數(shù)據(jù)表對(duì)應(yīng)的第二自增標(biāo)識(shí)；其中，所述第二數(shù)據(jù)表包括所述增量數(shù)據(jù)及待遷移數(shù)據(jù)；

根據(jù)所述第二自增標(biāo)識(shí)以及第一自增標(biāo)識(shí)，篩選得到所述增量數(shù)據(jù)對(duì)應(yīng)的第三數(shù)據(jù)表；其中，所述第一自增標(biāo)識(shí)為所述待遷移數(shù)據(jù)中的數(shù)據(jù)表對(duì)應(yīng)的自增標(biāo)識(shí)，所述第三數(shù)據(jù)表為所述增量數(shù)據(jù)中的數(shù)據(jù)表；

根據(jù)所述第三數(shù)據(jù)表得到所述增量數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述待遷移數(shù)據(jù)遷移到目標(biāo)數(shù)據(jù)庫(kù)，包括：

確定所述源數(shù)據(jù)庫(kù)中的第一數(shù)據(jù)表對(duì)應(yīng)的第一自增標(biāo)識(shí)；其中，所述第一數(shù)據(jù)表為所述待遷移數(shù)據(jù)中的數(shù)據(jù)表，同一所述源數(shù)據(jù)庫(kù)中的第一數(shù)據(jù)表的第一自增標(biāo)識(shí)按序遞增設(shè)置；

根據(jù)所述第一自增標(biāo)識(shí)將所述第一數(shù)據(jù)表遷移到所述目標(biāo)數(shù)據(jù)庫(kù)。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述第一自增標(biāo)識(shí)將所述第一數(shù)據(jù)表遷移到所述目標(biāo)數(shù)據(jù)庫(kù)，包括：

根據(jù)所述第一數(shù)據(jù)表對(duì)應(yīng)的第一自增標(biāo)識(shí)，并按照預(yù)設(shè)次序?qū)λ龅谝粩?shù)據(jù)表進(jìn)行讀取；

依次將讀取的所述第一數(shù)據(jù)表按照預(yù)設(shè)的遷移策略寫入對(duì)應(yīng)的目標(biāo)數(shù)據(jù)庫(kù)中。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述待遷移數(shù)據(jù)以及第一遷入數(shù)據(jù)進(jìn)行遷移前后的數(shù)據(jù)量一致性校驗(yàn)，包括：

根據(jù)所述待遷移數(shù)據(jù)生成第一Md5值；

根據(jù)所述第一遷入數(shù)據(jù)生成第二Md5值；

基于所述第一Md5值和第二Md5值進(jìn)行所述遷移前后的數(shù)據(jù)量一致性校驗(yàn)。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述增量數(shù)據(jù)以及第二遷入數(shù)據(jù)進(jìn)行所述增量數(shù)據(jù)的遷移結(jié)果校驗(yàn)，包括：

確定所述第三數(shù)據(jù)表中攜帶的全局唯一標(biāo)識(shí)；

根據(jù)所述全局唯一標(biāo)識(shí)從所述源數(shù)據(jù)庫(kù)中調(diào)取所述第三數(shù)據(jù)表；

根據(jù)所述全局唯一標(biāo)識(shí)從所述目標(biāo)數(shù)據(jù)庫(kù)中調(diào)取第四數(shù)據(jù)表；

根據(jù)所述第三數(shù)據(jù)表的數(shù)據(jù)以及所述第四數(shù)據(jù)表的數(shù)據(jù)進(jìn)行所述增量數(shù)據(jù)的遷移結(jié)果校驗(yàn)。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，根據(jù)所述第三數(shù)據(jù)表的數(shù)據(jù)以及所述第四數(shù)據(jù)表的數(shù)據(jù)進(jìn)行所述增量數(shù)據(jù)的遷移結(jié)果校驗(yàn)，包括：

根據(jù)所述第三數(shù)據(jù)表的數(shù)據(jù)生成第三Md5值；

根據(jù)所述第四數(shù)據(jù)表的數(shù)據(jù)生成第四Md5值；

基于所述第三Md5值和第四Md5值進(jìn)行所述遷移結(jié)果校驗(yàn)。

7.根據(jù)權(quán)利要求1-6任一項(xiàng)所述的方法，其特征在于，所述方法還包括：

獲取所述源數(shù)據(jù)庫(kù)中的未轉(zhuǎn)移數(shù)據(jù)；

在所述未轉(zhuǎn)移數(shù)據(jù)的數(shù)據(jù)量在預(yù)設(shè)區(qū)間內(nèi)時(shí)，停止對(duì)所述目標(biāo)數(shù)據(jù)庫(kù)進(jìn)行數(shù)據(jù)寫入；

在所述未轉(zhuǎn)移數(shù)據(jù)的數(shù)據(jù)量不在預(yù)設(shè)區(qū)間內(nèi)時(shí)，對(duì)所述未轉(zhuǎn)移數(shù)據(jù)進(jìn)行遷移。