[發明專利]一種HBase非主鍵索引的方法及HBase系統在審
| 申請號: | 201911350573.6 | 申請日: | 2019-12-24 |
| 公開(公告)號: | CN113032479A | 公開(公告)日: | 2021-06-25 |
| 發明(設計)人: | 李鋒;劉海朋 | 申請(專利權)人: | 上海昂創信息技術有限公司 |
| 主分類號: | G06F16/27 | 分類號: | G06F16/27;G06F16/22 |
| 代理公司: | 上海宏京知識產權代理事務所(普通合伙) 31297 | 代理人: | 崔巍 |
| 地址: | 200433 上海市楊*** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 hbase 主鍵 索引 方法 系統 | ||
1.一種HBase非主鍵索引的方法,其特征在于,所述方法包括以下步驟:
步驟1:構建基于HBase區域觀察者模式的協議處理器的第一層索引;
步驟2:實現基于HBase區域觀察者模式的協議處理器的第二層索引。
2.根據權利要求1所述的HBase非主鍵索引的方法,其特征在于,所述第一層索引步驟如下:
步驟1.1:通過區域觀察者實例捕獲客戶端操作的鉤子函數來查詢索引;
步驟1.2:通過區域觀察者模式的協議處理器為每個區域對象載入索引層來維護索引;
步驟1.3:采用d-left計數布隆過濾器表示電子數據的分布信息;
步驟1.4:通過d-left計數布隆過濾器確定每個區域對象中是否存儲有目標電子數據;
步驟1.5:通過查詢第一層索引快速定位存儲了目標電子數據的相關區域對象,標識區域對象后傳遞給第二層索引。
3.根據權利要求1所述的HBase非主鍵索引的方法,其特征在于,所述第二層索引步驟如下:
步驟2.1:通過第二層索引在第一層索引定位的相關區域對象中繼續查詢目標電子數據;
步驟2.2:遍歷所有的目標電子數據后將目標電子數據存儲在HDFS上。
4.根據權利要求3所述的HBase非主鍵索引的方法,其特征在于:所述第二層索引對所有的電子數據創建倒排索引后存儲在HDFS上。
5.根據權利要求1所述的HBase非主鍵索引的方法,其特征在于:所述第一層索引和第二層索引還包括在使用協處理器之前,將協處理器部署在HBase上。
6.一種HBase非主鍵索引的HBase系統,其特征在于,所述系統包括:
第一索引層:基于d-left計數布隆過濾器定位區域對象的電子數據,并且對區域對象進行標識后傳遞給第二索引層;
第二索引層:對標識區域對象的相關區域中的目標電子數據繼續查詢,并且將目標電子數據存儲在HDFS上。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于上海昂創信息技術有限公司,未經上海昂創信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201911350573.6/1.html,轉載請聲明來源鉆瓜專利網。





