[發(fā)明專利]基于分布式數(shù)據(jù)庫的數(shù)據(jù)操作方法、裝置及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201710096719.3
• 申請日: 2017-02-22
• 公開（公告）號: CN108460059A
• 公開（公告）日: 2018-08-28
• 發(fā)明（設(shè)計）人: 譚恒亮
• 申請（專利權(quán)）人: 廣州市云潤大數(shù)據(jù)服務(wù)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06F9/46
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 麥小嬋;郝傳鑫

本發(fā)明公開了一種基于分布式數(shù)據(jù)庫的數(shù)據(jù)操作方法、裝置及系統(tǒng)。所述基于分布式數(shù)據(jù)庫的數(shù)據(jù)操作方法包括：接收用戶的數(shù)據(jù)操作指令；其中，所述數(shù)據(jù)操作指令中包括待操作數(shù)據(jù)及相應(yīng)的操作類型標(biāo)識碼；根據(jù)所述待操作數(shù)據(jù)確定待操作的目標(biāo)數(shù)據(jù)庫，并根據(jù)所述數(shù)據(jù)操作指令，在所述目標(biāo)數(shù)據(jù)庫中完成對所述待操作數(shù)據(jù)的操作。采用本發(fā)明，能夠提高分布式數(shù)據(jù)庫中的數(shù)據(jù)操作的效率，且減少數(shù)據(jù)庫資源的耗費。

技術(shù)領(lǐng)域

本發(fā)明涉及計算機(jī)技術(shù)領(lǐng)域，尤其涉及一種基于分布式數(shù)據(jù)庫的數(shù)據(jù)操作方法、裝置及系統(tǒng)。

背景技術(shù)

HBase(Hadoop Database，一種分布式的、面向列的開源數(shù)據(jù)庫)是目前Hadoop(一種分布式系統(tǒng)基礎(chǔ)架構(gòu))生態(tài)系統(tǒng)中最著名的分布式NoSQL(泛指非關(guān)系型的數(shù)據(jù)庫)數(shù)據(jù)庫之一，其設(shè)計理念來源于Google的Bigtable(一種Google設(shè)計的分布式數(shù)據(jù)存儲系統(tǒng))。HBase為用戶提供表格類型的數(shù)據(jù)模型。為了方便數(shù)據(jù)的處理，HBase中的表通常按照主鍵的類型、范圍等劃分為若干個region(區(qū)塊)。HBase的主要組件為HMaster和HRegionsever，其中，HMaster主要負(fù)責(zé)管理和分配region，HRegionsever主要負(fù)責(zé)在各region中進(jìn)行數(shù)據(jù)的讀寫。

在現(xiàn)有技術(shù)中，分布式數(shù)據(jù)庫系統(tǒng)通常以索引的方式對數(shù)據(jù)庫中的各個region中的數(shù)據(jù)進(jìn)行讀寫，可以理解的是，在數(shù)據(jù)庫中寫入數(shù)據(jù)的同時需要生成相應(yīng)的索引，在從數(shù)據(jù)庫中讀取數(shù)據(jù)之前需要首先檢索索引以獲得數(shù)據(jù)的存儲位置，數(shù)據(jù)的讀寫過程效率低下，且索引的存儲需要占用數(shù)據(jù)庫的空間，造成數(shù)據(jù)庫資源耗費較大。

發(fā)明內(nèi)容

本發(fā)明提出一種基于分布式數(shù)據(jù)庫的數(shù)據(jù)操作方法、裝置及系統(tǒng)，能夠提高分布式數(shù)據(jù)庫中的數(shù)據(jù)操作的效率，且減少數(shù)據(jù)庫資源的耗費。

本發(fā)明提供的一種基于分布式數(shù)據(jù)庫的數(shù)據(jù)操作方法，具體包括：

接收用戶的數(shù)據(jù)操作指令；其中，所述數(shù)據(jù)操作指令中包括待操作數(shù)據(jù)及相應(yīng)的操作類型標(biāo)識碼；

根據(jù)所述數(shù)據(jù)操作指令，在目標(biāo)數(shù)據(jù)庫中完成對所述待操作數(shù)據(jù)的操作；

所述根據(jù)所述數(shù)據(jù)操作指令，在目標(biāo)數(shù)據(jù)庫中完成對所述待操作數(shù)據(jù)的操作，具體包括：

根據(jù)所述待操作數(shù)據(jù)計算獲得目標(biāo)數(shù)據(jù)庫標(biāo)識碼；

根據(jù)所述操作類型標(biāo)識碼判斷所述數(shù)據(jù)操作指令的操作類型；

若所述操作類型為數(shù)據(jù)寫入類型，則將所述待操作數(shù)據(jù)寫入所述目標(biāo)數(shù)據(jù)庫標(biāo)識碼所對應(yīng)目標(biāo)數(shù)據(jù)庫中；

若所述操作類型為數(shù)據(jù)讀取類型，則在所述目標(biāo)數(shù)據(jù)庫標(biāo)識碼所對應(yīng)的目標(biāo)數(shù)據(jù)庫中查找獲得與所述待操作數(shù)據(jù)相對應(yīng)的目標(biāo)數(shù)據(jù)記錄，并讀取所述目標(biāo)數(shù)據(jù)記錄。

進(jìn)一步地，其特征在于，所述根據(jù)所述待操作數(shù)據(jù)計算獲得目標(biāo)數(shù)據(jù)庫標(biāo)識碼，具體包括：

將所述待操作數(shù)據(jù)代入預(yù)先設(shè)置的散列函數(shù)中，計算獲得所述目標(biāo)數(shù)據(jù)庫標(biāo)識碼。

進(jìn)一步地，在所述接收用戶的數(shù)據(jù)操作指令之后，所述根據(jù)所述數(shù)據(jù)操作指令，在目標(biāo)數(shù)據(jù)庫中完成對所述待操作數(shù)據(jù)的操作之前，還包括：

根據(jù)所述數(shù)據(jù)操作指令生成相應(yīng)的執(zhí)行計劃；其中，所述執(zhí)行計劃中包括數(shù)據(jù)庫連接方式及數(shù)據(jù)庫連接次序；

則所述根據(jù)所述待操作數(shù)據(jù)計算獲得目標(biāo)數(shù)據(jù)庫標(biāo)識碼，具體包括：

在并行機(jī)制中，根據(jù)所述數(shù)據(jù)庫連接次序確定數(shù)據(jù)操作指令執(zhí)行時刻；

當(dāng)當(dāng)前時刻為所述數(shù)據(jù)操作指令執(zhí)行時刻時，根據(jù)所述待操作數(shù)據(jù)計算獲得所述目標(biāo)數(shù)據(jù)庫標(biāo)識碼；