[發明專利]一種建立二級索引的方法和分布式NewSQL數據庫

有效

• 申請號: 201710581193.8
• 申請日: 2017-07-17
• 公開（公告）號: CN107451219B
• 公開（公告）日: 2020-06-09
• 發明（設計）人: 晉彤
• 申請（專利權）人: 云潤大數據服務有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2458
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 梁順宜;郝傳鑫

1.一種建立二級索引的方法，其特征在于，適用于分布式NewSQL數據庫系統，包括：

以JDCB/ODBC的接口方式接入用戶請求，將所述用戶請求轉化SQL語句形式的SQL請求，其中，所述用戶請求包括需要寫入的數據字段；

解析所述用戶請求，編譯以及生成對應的執行計劃；具體的，判斷共享緩存池中是否存在與所述SQL請求相對應的預存SQL語句，若是，則輸出相對應的所述預存SQL語句對應的執行計劃，若否，則，

對所述SQL請求進行語法檢查，若語法錯誤返回錯誤信息給用戶，否則，

對所述SQL請求進行語義檢查，若語義錯誤返回錯誤信息給用戶，否則，

對所述SQL請求進行視圖以及表達式轉換，獲得對應的轉化結果；

根據所述轉換結果選擇優化器，獲得對應的優化器選擇結果；

根據所述優化器選擇結果選擇對應的數據連接方式以及連接順序；

根據連接方式和連接順序選擇搜索的路徑；

根據搜索路徑生成執行計劃，并輸出執行計劃；

根據執行計劃，將所述用戶請求的所述數據字段寫入數據表；

在所述數據字段寫入數據表時，將待寫入的數據字段生成倒排索引形式的多個索引數據，并將多個所述索引數據寫入到索引表；

將數據完成寫入的處理結果返回用戶。

2.一種分布式NewSQL數據庫系統，其特征在于，包括：

JDCB/ODBC接口單元，用于與用戶進行交互操作，包括接收用戶請求，將所述用戶請求轉化SQL語句形式的SQL請求，返回處理結果；其中，所述用戶請求包括需要寫入的數據字段；所述處理結果為數據字段已寫入的處理結果；

master單元，用于通過JDCB/ODBC接口的方式接入用戶請求，并協調多個處理器之間的數據通訊以及管理整體流程，并將所述用戶請求優先發送給SQLPlaner單元；master單元還用于將數據完成寫入的處理結果返回JDCB/ODBC接口單元；

SQLPlaner單元，用于解析所述用戶請求，根據所述用戶請求編譯以及定制執行計劃；具體的，

判斷共享緩存池中是否存在與所述SQL請求相對應的預存SQL語句，若是，則輸出相對應的所述預存SQL語句對應的執行計劃，若否，則，

對所述SQL請求進行語法檢查，若語法錯誤返回錯誤信息給用戶，否則，

對所述SQL請求進行語義檢查，若語義錯誤返回錯誤信息給用戶，否則，

對所述SQL請求進行視圖以及表達式轉換，獲得對應的轉化結果；

根據所述轉換結果選擇優化器，獲得對應的優化器選擇結果；

根據所述優化器選擇結果選擇對應的數據連接方式以及連接順序；

根據連接方式和連接順序選擇搜索的路徑；

根據搜索路徑生成執行計劃，并輸出執行計劃；

worker單元，用于并行地執行所述計劃，將所述用戶請求的所述數據字段寫入Hbase單元的數據表；還用于將所述Hbase單元的處理結果返回至所述master單元；

Hbase單元，用于儲存所述數據表和索引表，所述Hbase單元還包括coprocessor模塊，用于在所述數據字段寫入數據表時，將待寫入的數據字段生成倒排索引形式的多個索引數據，并將多個所述索引數據寫入到索引表；其中，所述數據表和所述索引表儲存于所述Hbase單元；

分布式事務管理器，用于當所述worker單元執行計劃涉及事務時，協調多方完成分布式事務管理。

3.如權利要求2所述的一種分布式NewSQL數據庫系統，其特征在于，還包括：

監視器，用于負責元數據管理，監控所述Hbase單元的Region的負載，以及通過所述Hbase單元的coprocessor模塊重新分配Region；所述監視器與所述master單元連接。