[發明專利]一種建立二級索引的方法和分布式NewSQL數據庫

有效

• 申請號: 201710581193.8
• 申請日: 2017-07-17
• 公開（公告）號: CN107451219B
• 公開（公告）日: 2020-06-09
• 發明（設計）人: 晉彤
• 申請（專利權）人: 云潤大數據服務有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2458
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 梁順宜;郝傳鑫

本發明公開了一種分布式NewSQL數據庫系統，包括：master單元，用于以數據庫接口的方式接入用戶請求，并將所述用戶請求發送給計劃單元；其中，所述用戶請求包括需要寫入的數據字段；計劃單元，用于解析所述用戶請求，編譯以及生成對應的執行計劃；執行單元，用于根據執行計劃，將所述用戶請求的所述數據字段寫入數據表；Hbase單元，用于儲存所述數據表和索引表，所述Hbase單元還包括協同處理模塊，用于在所述數據字段寫入數據表時，將所述數據字段生成倒排索引形式的索引數據，并將所述索引數據寫入到索引表。本發明還公開了基于上述分布式NewSQL數據庫系統的數據儲存方法。本發明能有效支持建立二級索引，從而高效解決非主鍵查詢需求。

技術領域

本發明涉及大數據技術領域，尤其涉及一種建立二級索引的方法和分布式NewSQL數據庫。

背景技術

目前Hbase是Hadoop生態體系中最著名的分布式NoSQL數據庫之一。其設計理念來源于Google的Bigtable。Hbase主要組件包括HMaster和HRegionsever，為用戶提供表格類型的數據模型，按主鍵范圍劃分為多個region，HMaster負責管理和分配region，HRegionserver負責region數據的讀寫。但隨著越來越多的應用嘗試遷移到Hbase上，現有的Hbase的缺陷也越來越被暴露出來：在實際應用中，用戶往往需要進行多維度的查詢，現有的Hbase無法有效的支持非主鍵查詢。

發明內容

本發明實施例的目的是提供一種建立二級索引的方法和分布式NewSQL數據庫系統，能有效支持建立二級索引，從而高效解決非主鍵查詢需求。

為實現上述目的，本發明實施例提供了一種分布式NewSQL數據庫系統，包括：

以JDCB/ODBC的接口方式接入用戶請求，其中，所述用戶請求包括需要寫入的數據字段；

解析所述用戶請求，編譯以及生成對應的執行計劃；

根據執行計劃，將所述用戶請求的所述數據字段寫入數據表；

在所述數據字段寫入數據表時，將所述待寫入的數據字段生成倒排索引形式的多個索引數據，并將多個所述索引數據寫入到索引表；

將數據完成寫入的處理結果返回用戶。

進一步的，還包括：將所述用戶請求轉化SQL語句形式的SQL請求。

進一步的，所述解析所述用戶請求，編譯以及生成對應的執行計劃包括：

判斷共享緩存池中是否存在與所述SQL請求相對應的預存SQL語句，若是，則輸出相對應的所述預存SQL語句對應的執行計劃，若否，則，

對所述SQL請求進行語法檢查，若語法錯誤返回錯誤信息給用戶，否則，

對所述SQL請求進行語義檢查，若語義錯誤返回錯誤信息給用戶，否則，

對所述SQL請求進行視圖以及表達式轉換，獲得對應的轉化結果；

根據所述轉換結果選擇優化器，獲得對應的優化器選擇結果；

根據所述優化器選擇結果選擇對應的數據連接方式以及連接順序；

根據連接方式和連接順序選擇搜索的路徑；

根據搜索路徑生成執行計劃，并輸出執行計劃。

相應，本發明實施例還提供一種分布式NewSQL數據庫系統，包括：

JDCB/ODBC接口單元，用于與用戶進行交互操作，包括接收用戶請求，返回處理結果；其中，所述用戶請求包括需要寫入的數據字段；所述處理結果為數據字段已寫入的處理結果；