[發明專利]基于HBase協處理器的類SQL查詢的方法和系統有效
| 申請號: | 201610308094.8 | 申請日: | 2016-05-11 |
| 公開(公告)號: | CN107368477B | 公開(公告)日: | 2021-02-26 |
| 發明(設計)人: | 邵先凱;李威;張鵬 | 申請(專利權)人: | 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司 |
| 主分類號: | G06F16/2457 | 分類號: | G06F16/2457 |
| 代理公司: | 中原信達知識產權代理有限責任公司 11219 | 代理人: | 張一軍;姜勁 |
| 地址: | 100195 北京市海淀區杏石口路6*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 基于 hbase 處理器 sql 查詢 方法 系統 | ||
1.一種基于HBase協處理器的類SQL查詢的方法,其特征在于,包括:
在HBase客戶端預先配置HBase存儲的表的元數據,通過元數據還原HBase中的業務數據;
通過HBase查詢引擎建立上層業務接入連接,解析從上層業務傳入的SQL查詢語句,生成查詢請求;
所述HBase客戶端將所述查詢請求分發至RegionServer;
所述RegionServer根據所述查詢請求利用HBase協處理器并行查詢和處理數據;
所述HBase客戶端合并由所述RegionServer返回的數據并封裝結果集;其中,所述結果集由行聚合而成,行則由列聚合而成。
2.根據權利要求1所述的方法,其特征在于,所述上層業務接入連接采用JDBC連接方式。
3.根據權利要求1所述的方法,其特征在于,解析從上層業務傳入的SQL查詢語句還包括:接收業務端的SQL查詢語句,對SQL查詢語句進行預處理,并通過詞法、語法分析生成SQL查詢請求。
4.根據權利要求1所述的方法,其特征在于,所述HBase客戶端將所述查詢請求分發至RegionServer還包括:根據Rowkey信息將所述查詢請求分發至所述RegionServer。
5.一種基于HBase協處理器的類SQL查詢的系統,其特征在于,包括:
配置模塊,用于在HBase客戶端預先配置HBase存儲的表的元數據,通過元數據還原HBase中的業務數據;
上層業務連接模塊,用于通過HBase查詢引擎建立上層業務接入連接,解析從上層業務傳入的SQL查詢語句,生成查詢請求;以及
HBase,其中,在所述HBase中,
所述HBase客戶端將所述查詢請求分發至RegionServer;
所述RegionServer根據所述查詢請求利用HBase協處理器并行查詢和處理數據;
所述HBase客戶端合并由所述RegionServer返回的數據并封裝結果集;其中,所述結果集由行聚合而成,行則由列聚合而成。
6.根據權利要求5所述的系統,其特征在于,所述上層業務連接模塊還用于采用JDBC連接方式為上層業務提供接入連接。
7.根據權利要求5所述的系統,其特征在于,所述上層業務連接模塊還用于:接收業務端的SQL查詢語句,對SQL查詢語句進行預處理,并通過詞法、語法分析生成SQL查詢請求。
8.根據權利要求5所述的系統,其特征在于,所述HBase客戶端還用于:根據Rowkey信息將所述查詢請求分發至所述RegionServer。
9.一種電子設備,其特征在于,包括:
一個或多個處理器;
存儲裝置,用于存儲一個或多個程序,
當所述一個或多個程序被所述一個或多個處理器執行,使得所述一個或多個處理器實現如權利要求1-4中任一所述的方法。
10.一種計算機可讀介質,其上存儲有計算機程序,其特征在于,所述程序被處理器執行時實現如權利要求1-4中任一所述的方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司,未經北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201610308094.8/1.html,轉載請聲明來源鉆瓜專利網。





