[發(fā)明專利]基于非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)同步方法、設(shè)備、裝置和介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202011381742.5
• 申請(qǐng)日: 2020-12-01
• 公開（公告）號(hào): CN112395360B
• 公開（公告）日: 2023-06-23
• 發(fā)明（設(shè)計(jì)）人: 于慶淼
• 申請(qǐng)（專利權(quán)）人: 中國聯(lián)合網(wǎng)絡(luò)通信集團(tuán)有限公司
• 主分類號(hào): G06F16/27
• 分類號(hào): G06F16/27;G06F16/22;G06F16/2455;G06F16/18
• 代理公司: 北京同立鈞成知識(shí)產(chǎn)權(quán)代理有限公司 11205
• 代理人: 張寧;臧建明

本申請(qǐng)?zhí)峁┑幕诜顷P(guān)系型數(shù)據(jù)庫的數(shù)據(jù)同步方法、設(shè)備、裝置和介質(zhì)，通過獲取關(guān)系型數(shù)據(jù)庫中數(shù)據(jù)的變化日志，然后根據(jù)數(shù)據(jù)變換日志中的各聯(lián)合主鍵生成日志的索引主鍵，然后在非關(guān)系型數(shù)據(jù)庫中根據(jù)日志中的數(shù)據(jù)，對(duì)非關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)進(jìn)行更新，以實(shí)現(xiàn)非關(guān)系型數(shù)據(jù)庫與關(guān)系型數(shù)據(jù)庫的同步，并且在數(shù)據(jù)庫同步的過程中，不需要對(duì)關(guān)系型數(shù)據(jù)庫中數(shù)據(jù)所存放的表結(jié)構(gòu)進(jìn)行修改，避免了數(shù)據(jù)表結(jié)構(gòu)修改過程中大量數(shù)據(jù)的割接及修改從而導(dǎo)致數(shù)據(jù)庫同步的時(shí)間增長(zhǎng)與工作量的加大的問題。

技術(shù)領(lǐng)域

本申請(qǐng)涉及數(shù)據(jù)庫處理技術(shù)領(lǐng)域，尤其涉及一種基于非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)同步方法、設(shè)備、裝置和介質(zhì)。

背景技術(shù)

目前，提供了關(guān)系型數(shù)據(jù)庫和非關(guān)系型數(shù)據(jù)庫可以存儲(chǔ)數(shù)據(jù)；可以將關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)同步到非關(guān)系型數(shù)據(jù)庫中，以加快數(shù)據(jù)檢索的效率。

現(xiàn)有技術(shù)中，可以取消關(guān)系型數(shù)據(jù)庫所存儲(chǔ)的數(shù)據(jù)的聯(lián)合主鍵，為關(guān)系型數(shù)據(jù)庫所存儲(chǔ)的數(shù)據(jù)生成一個(gè)新的索引鍵，進(jìn)而將具有索引鍵的數(shù)據(jù)同時(shí)存儲(chǔ)于關(guān)系型數(shù)據(jù)庫和非關(guān)系型數(shù)據(jù)庫中，進(jìn)而便于實(shí)現(xiàn)關(guān)系型數(shù)據(jù)庫與非關(guān)系型數(shù)據(jù)庫之間的數(shù)據(jù)同步。

然而，上述方式中需要取消關(guān)系型數(shù)據(jù)庫所存儲(chǔ)的數(shù)據(jù)的聯(lián)合主鍵，為關(guān)系型數(shù)據(jù)庫所存儲(chǔ)的數(shù)據(jù)生成一個(gè)新的索引鍵，進(jìn)而需要修改關(guān)系型數(shù)據(jù)庫所存儲(chǔ)的數(shù)據(jù)的結(jié)構(gòu)，從而帶來了大量的數(shù)據(jù)的割接以及修改過程，增加了數(shù)據(jù)庫同步的時(shí)間與工作量。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┑幕诜顷P(guān)系型數(shù)據(jù)庫的數(shù)據(jù)同步方法、設(shè)備、裝置和介質(zhì)，用以解決關(guān)系型數(shù)據(jù)庫與非關(guān)系型數(shù)據(jù)庫在同步過程中，需要對(duì)關(guān)系數(shù)據(jù)庫的聯(lián)合主鍵進(jìn)行修改從而導(dǎo)致數(shù)據(jù)表的結(jié)構(gòu)發(fā)生更改，增加了數(shù)據(jù)庫同步的時(shí)間機(jī)工作量的問題。

第一方面，本申請(qǐng)?zhí)峁┮环N基于非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)同步方法，所述方法包括：

獲取關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)變換日志表，其中，所述數(shù)據(jù)變換日志表包括至少一條日志，每條日志中包括數(shù)據(jù)，所述數(shù)據(jù)中具有至少一個(gè)聯(lián)合主鍵；

根據(jù)所述日志中的各聯(lián)合主鍵，生成所述日志的索引主鍵；

根據(jù)所述日志的數(shù)據(jù)，同步更新非關(guān)系型數(shù)據(jù)庫中的存儲(chǔ)數(shù)據(jù)，其中，所述非關(guān)系型數(shù)據(jù)庫中多條存儲(chǔ)數(shù)據(jù)，每條存儲(chǔ)數(shù)據(jù)具有對(duì)應(yīng)的索引主鍵。

在一種可能的設(shè)計(jì)中，根據(jù)所述日志中的各聯(lián)合主鍵，生成所述日志的索引主鍵，包括：

將所述日志中的各聯(lián)合主鍵進(jìn)行拼接，得到所述日志的拼接主鍵；

根據(jù)對(duì)所述日志的拼接主鍵進(jìn)行格式處理，得到所述日志的索引主鍵，其中，不同日志的索引主鍵的長(zhǎng)度相同。

在一種可能的設(shè)計(jì)中，根據(jù)對(duì)所述日志的拼接主鍵進(jìn)行格式處理，得到所述日志的索引主鍵，包括：

依據(jù)消息摘要算法對(duì)所述日志的拼接主鍵進(jìn)行格式處理，得到所述日志的索引主鍵。

在一種可能的設(shè)計(jì)中，獲取關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)變換日志表，包括：

通過數(shù)據(jù)傳輸服務(wù)監(jiān)控所述關(guān)系型數(shù)據(jù)庫中的關(guān)系型數(shù)據(jù)的變化情況，得到所述每條日志；

將所述每條日志存儲(chǔ)至消息隊(duì)列中，以得到所述數(shù)據(jù)變換日志表。

在一種可能的設(shè)計(jì)中，所述每條日志具有操作類型；所述操作類型為以下的任意一種：刪除、增加、修改。

在一種可能的設(shè)計(jì)中，根據(jù)所述日志的數(shù)據(jù)，同步更新非關(guān)系型數(shù)據(jù)庫中的存儲(chǔ)數(shù)據(jù)，包括：

若所述日志的操作類型為修改或刪除，則根據(jù)所述日志的索引主鍵，確定非關(guān)系型數(shù)據(jù)庫中與所述日志的索引主鍵對(duì)應(yīng)的索引主鍵，則根據(jù)所述日志的數(shù)據(jù)，同步更新與所述日志的索引主鍵對(duì)應(yīng)的索引主鍵下的存儲(chǔ)數(shù)據(jù)；