[發(fā)明專利]一種面向Hbase數(shù)據(jù)庫(kù)的復(fù)合查詢方法有效
| 申請(qǐng)?zhí)枺?/td> | 201310139785.6 | 申請(qǐng)日: | 2013-04-22 |
| 公開(kāi)(公告)號(hào): | CN104111955B | 公開(kāi)(公告)日: | 2018-10-23 |
| 發(fā)明(設(shè)計(jì))人: | 劉磊;何東杰;王海冰;才華 | 申請(qǐng)(專利權(quán))人: | 中國(guó)銀聯(lián)股份有限公司 |
| 主分類號(hào): | G06F17/30 | 分類號(hào): | G06F17/30 |
| 代理公司: | 中國(guó)專利代理(香港)有限公司 72001 | 代理人: | 唐立;朱海煜 |
| 地址: | 200135 上海*** | 國(guó)省代碼: | 上海;31 |
| 權(quán)利要求書: | 查看更多 | 說(shuō)明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 面向 hbase 數(shù)據(jù)庫(kù) 復(fù)合 查詢 方法 | ||
1.一種面向Hbase數(shù)據(jù)庫(kù)的復(fù)合查詢方法,其中,所述Hbase數(shù)據(jù)庫(kù)中的每條記錄按主鍵(Key)-鍵值(Value)結(jié)構(gòu)存儲(chǔ)于主記錄表,復(fù)合查詢的條件中包括對(duì)應(yīng)主記錄表的鍵值部分的M個(gè)組合條件,M為大于2的整數(shù);其特征在于,包括以下步驟:
(1)建立索引表步驟:定義索引表的Key和Value,其中,索引表的Key的要素包括所述M個(gè)組合條件的N個(gè),該N個(gè)組合條件在所述索引表的Key中按照其數(shù)據(jù)過(guò)濾度排列,數(shù)據(jù)過(guò)濾度越高,相應(yīng)的組合條件排列越靠前,所述索引表的Value的要素至少包括對(duì)應(yīng)所述主記錄表的Key,2≤N<M;
(2)索引建立步驟:將所述記錄按照所述索引表的結(jié)構(gòu)相應(yīng)插入索引表中;
(3)數(shù)據(jù)檢索步驟,其包括:
a)根據(jù)輸入的復(fù)合查詢的條件,提取所述N個(gè)組合條件生成第一Key,
b)根據(jù)所述第一Key在所述索引表中進(jìn)行主鍵查詢,以得到符合所述N個(gè)組合條件的相應(yīng)記錄,
c)針對(duì)得到的所述記錄,將其對(duì)應(yīng)索引表的Value中的對(duì)應(yīng)所述主記錄表的Key的要素定義為第二Key,至少在所述主記錄表中進(jìn)行主鍵查詢,隨后,將M個(gè)組合條件中的所述N個(gè)條件之外的條件,作為過(guò)濾條件,遍歷查詢所述主記錄表的Value。
2.如權(quán)利要求1所述的復(fù)合查詢方法,其特征在于,還包括步驟:將所述步驟(3)中檢索得到的記錄按批定量地輸出以供用戶瀏覽,并且,在用戶瀏覽某一批輸出的記錄時(shí),同時(shí)進(jìn)行所述步驟(3)的檢索過(guò)程以進(jìn)一步檢索出之后批次的其他記錄。
3.如權(quán)利要求2所述的復(fù)合查詢方法,其特征在于,用戶在瀏覽完某一批記錄后動(dòng)作,根據(jù)該動(dòng)作,下一批所述記錄被定量輸出。
4.如權(quán)利要求1所述的復(fù)合查詢方法,其特征在于,所述索引表的Key中被插入隨機(jī)數(shù)以保證索引表的每個(gè)Key的唯一性。
5.如權(quán)利要求1所述的復(fù)合查詢方法,其特征在于,所述步驟(2)中,逐條地或分批地將所述記錄按照所述索引表的結(jié)構(gòu)相應(yīng)插入索引表中。
6.如權(quán)利要求1或5所述的復(fù)合查詢方法,其特征在于,所述步驟(2)中,包括以下步驟:
A)對(duì)于每條記錄,讀取其按主記錄表的定義的Key1和Value1;
B)至少將Value1中的對(duì)應(yīng)索引表的Key的要素組合生成Key2,將Key1形成Value2;
C)將記錄以Key2-Value2的結(jié)構(gòu)形式插入所述索引表中。
7.如權(quán)利要求1所述的復(fù)合查詢方法,其特征在于,所述第一Key中的所述N個(gè)組合條件的排列順序與所述索引表的Key的N個(gè)組合條件的排序順序相同。
8.如權(quán)利要求1所述的復(fù)合查詢方法,其特征在于,所述記錄為刷卡交易記錄。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于中國(guó)銀聯(lián)股份有限公司,未經(jīng)中國(guó)銀聯(lián)股份有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201310139785.6/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F17-00 特別適用于特定功能的數(shù)字計(jì)算設(shè)備或數(shù)據(jù)處理設(shè)備或數(shù)據(jù)處理方法
G06F17-10 .復(fù)雜數(shù)學(xué)運(yùn)算的
G06F17-20 .處理自然語(yǔ)言數(shù)據(jù)的
G06F17-30 .信息檢索;及其數(shù)據(jù)庫(kù)結(jié)構(gòu)
G06F17-40 .數(shù)據(jù)的獲取和記錄
G06F17-50 .計(jì)算機(jī)輔助設(shè)計(jì)
- 一種基于thrift服務(wù)的HBase安全插件
- 一種實(shí)現(xiàn)Windows下連接控制Hbase的方法及裝置
- 一種基于大數(shù)據(jù)的數(shù)據(jù)脫敏方法和Hbase脫敏處理系統(tǒng)
- 多個(gè)集群數(shù)據(jù)一致性的控制方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)
- HBase數(shù)據(jù)遷移方法及遷移裝置
- 基于phoenix改造hbase舊系統(tǒng)的索引同步方法、裝置及系統(tǒng)
- 一種格式化HBase數(shù)據(jù)的方法
- 一種多HBase集群訪問(wèn)方法、裝置及存儲(chǔ)介質(zhì)
- HBase集群平衡方法、裝置、電子設(shè)備和存儲(chǔ)介質(zhì)
- 一種基于AEP內(nèi)存的HBase集群性能優(yōu)化方法及系統(tǒng)
- 數(shù)據(jù)庫(kù)
- 數(shù)據(jù)庫(kù)管理系統(tǒng)及數(shù)據(jù)庫(kù)
- 數(shù)據(jù)庫(kù)構(gòu)筑裝置、數(shù)據(jù)庫(kù)檢索裝置、數(shù)據(jù)庫(kù)裝置、數(shù)據(jù)庫(kù)構(gòu)筑方法、以及數(shù)據(jù)庫(kù)檢索方法
- 數(shù)據(jù)庫(kù)和數(shù)據(jù)庫(kù)處理方法
- 數(shù)據(jù)庫(kù)系統(tǒng)、數(shù)據(jù)庫(kù)更新方法、數(shù)據(jù)庫(kù)以及數(shù)據(jù)庫(kù)更新程序
- 容器數(shù)據(jù)庫(kù)
- 數(shù)據(jù)庫(kù)同步方法及數(shù)據(jù)庫(kù)
- 一種MongoDB數(shù)據(jù)庫(kù)對(duì)象復(fù)制延遲監(jiān)控方法和裝置
- 數(shù)據(jù)分布式存儲(chǔ)方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)
- 數(shù)據(jù)庫(kù)語(yǔ)句執(zhí)行方法及裝置





