[發(fā)明專利]基于分布式數(shù)據(jù)庫的數(shù)據(jù)存儲(chǔ)方法、裝置及電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202110096014.8
• 申請(qǐng)日: 2021-01-25
• 公開（公告）號(hào): CN112818047A
• 公開（公告）日: 2021-05-18
• 發(fā)明（設(shè)計(jì)）人: 程賡;劉建波;李明佳
• 申請(qǐng)（專利權(quán)）人: 中國鐵塔股份有限公司
• 主分類號(hào): G06F16/25
• 分類號(hào): G06F16/25;G06F16/182;G06F16/22;G06F16/27
• 代理公司: 北京銀龍知識(shí)產(chǎn)權(quán)代理有限公司 11243
• 代理人: 黃燦;劉念

1.一種基于分布式數(shù)據(jù)庫的數(shù)據(jù)存儲(chǔ)方法，其特征在于，所述方法包括：

獲取待存儲(chǔ)至分布式數(shù)據(jù)庫的目標(biāo)數(shù)據(jù)文件，所述目標(biāo)數(shù)據(jù)文件包括待存儲(chǔ)數(shù)據(jù)和所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的鍵值；

基于所述鍵值和所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量，生成所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的節(jié)點(diǎn)編號(hào)；

將所述待存儲(chǔ)數(shù)據(jù)存儲(chǔ)至所述節(jié)點(diǎn)編號(hào)對(duì)應(yīng)的物理存儲(chǔ)節(jié)點(diǎn)中。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述鍵值和所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量，生成所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的節(jié)點(diǎn)編號(hào)，包括：

生成所述鍵值對(duì)應(yīng)的隨機(jī)數(shù)；

以所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量為除數(shù)，對(duì)所述隨機(jī)數(shù)進(jìn)行取模，得到所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的節(jié)點(diǎn)編號(hào)。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述生成所述鍵值對(duì)應(yīng)的隨機(jī)數(shù)，包括：

確定可均衡分布所述待存儲(chǔ)數(shù)據(jù)的目標(biāo)分布字段，所述目標(biāo)分布字段關(guān)聯(lián)的各個(gè)取值區(qū)間關(guān)聯(lián)的所述待存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)量大于第一預(yù)設(shè)值，且小于第二預(yù)設(shè)值，所述第一預(yù)設(shè)值小于所述第二預(yù)設(shè)值；

獲取所述鍵值中與所述目標(biāo)分布字段關(guān)聯(lián)的目標(biāo)值；

基于所述目標(biāo)值生成所述鍵值對(duì)應(yīng)的隨機(jī)數(shù)。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述鍵值和所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量，生成所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的節(jié)點(diǎn)編號(hào)之前，所述方法還包括：

統(tǒng)計(jì)所述目標(biāo)數(shù)據(jù)文件中所述目標(biāo)分布字段對(duì)應(yīng)的待存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)量；

基于所述數(shù)據(jù)量，確定所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取待存儲(chǔ)至分布式數(shù)據(jù)庫的目標(biāo)數(shù)據(jù)文件，包括：

獲取待存儲(chǔ)至分布式數(shù)據(jù)庫的數(shù)據(jù)文件；

對(duì)所述數(shù)據(jù)文件進(jìn)行格式規(guī)范化處理，得到目標(biāo)存儲(chǔ)格式的所述目標(biāo)數(shù)據(jù)文件，所述目標(biāo)存儲(chǔ)格式為所述分布式數(shù)據(jù)庫對(duì)應(yīng)的存儲(chǔ)格式。

6.一種基于分布式數(shù)據(jù)庫的數(shù)據(jù)存儲(chǔ)裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取待存儲(chǔ)至分布式數(shù)據(jù)庫的目標(biāo)數(shù)據(jù)文件，所述目標(biāo)數(shù)據(jù)文件包括待存儲(chǔ)數(shù)據(jù)和所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的鍵值；

生成模塊，用于基于所述鍵值和所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量，生成所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的節(jié)點(diǎn)編號(hào)；

存儲(chǔ)模塊，包括將所述待存儲(chǔ)數(shù)據(jù)存儲(chǔ)至所述節(jié)點(diǎn)編號(hào)對(duì)應(yīng)的物理存儲(chǔ)節(jié)點(diǎn)中。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述生成模塊包括：

生成單元，用于生成所述鍵值對(duì)應(yīng)的隨機(jī)數(shù)；

取模單元，用于以所述分布式數(shù)據(jù)庫的物理存儲(chǔ)節(jié)點(diǎn)的數(shù)量為除數(shù)，對(duì)所述隨機(jī)數(shù)進(jìn)行取模，得到所述待存儲(chǔ)數(shù)據(jù)對(duì)應(yīng)的節(jié)點(diǎn)編號(hào)。

8.根據(jù)權(quán)利要求7所述的裝置，其特征在于，所述生成單元，具體用于確定可均衡分布所述待存儲(chǔ)數(shù)據(jù)的目標(biāo)分布字段，所述目標(biāo)分布字段關(guān)聯(lián)的各個(gè)取值區(qū)間關(guān)聯(lián)的所述待存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)量大于第一預(yù)設(shè)值，且小于第二預(yù)設(shè)值，所述第一預(yù)設(shè)值小于所述第二預(yù)設(shè)值；獲取所述鍵值中與所述目標(biāo)分布字段關(guān)聯(lián)的目標(biāo)值；基于所述目標(biāo)值生成所述鍵值對(duì)應(yīng)的隨機(jī)數(shù)。

9.一種電子設(shè)備，其特征在于，包括處理器、存儲(chǔ)器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至5中任一項(xiàng)所述的基于分布式數(shù)據(jù)庫的數(shù)據(jù)存儲(chǔ)方法的步驟。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至5中任一項(xiàng)所述的基于分布式數(shù)據(jù)庫的數(shù)據(jù)存儲(chǔ)方法的步驟。