[發明專利]基于Hbase數據庫的多條件搜索方法及裝置

有效

• 申請號: 201710370179.3
• 申請日: 2017-05-23
• 公開（公告）號: CN107239517B
• 公開（公告）日: 2020-09-29
• 發明（設計）人: 劉占春;劉金財;王濤;齊博
• 申請（專利權）人: 中國聯合網絡通信集團有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/28;G06F16/22
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 楊文娟;劉芳

本發明提供了一種基于Hbase數據庫的多條件搜索方法及裝置，該方法包括：接收用戶通過終端設備輸入的多個搜索字段；判斷是否存在與多個搜索字段對應的多條件組合鍵值對關系；若不存在與多個搜索字段對應的多條件組合鍵值對關系，則通過分布式搜索引擎根據多個搜索字段進行搜索，并輸出滿足多個搜索字段的記錄集合；根據記錄集合的每個記錄中的任一字段的鍵值對關系從Hbase數據庫中讀取對應的完整數據。能夠通過分布式搜索引擎進行一級索引，并通過任一字段的鍵值對關系在Hbase數據庫中進行二級索引，提升了整個多條件組合搜索的效率，并且減少了多條件組合搜索的成本。

技術領域

本發明實施例涉及大數據處理技術領域，尤其涉及一種基于Hbase數據庫的多條件搜索方法及裝置。

背景技術

隨著互聯網和大數據技術的發展，傳統的關系數據庫已無法滿足大數據的存儲和使用需求，因此非關系型數據庫HBase應運而生。該Hbase數據庫具有海量數據的存儲和線性擴展能力，所以非常適用于大數據的存儲和使用需求。

現有的HBase數據庫，通過建立鍵值對關系進行數據的搜索，對于沒有鍵值對關系的多條件組合搜索，需要全表掃描，使對數據的搜索效率低下。為了提高多條件組合搜索的效率，需要事先建立各種多條件組合鍵值對關系，如果組合查詢條件發生變化，需要重新設計和生成對應的多條件組合鍵值對關系，使多條件組合搜索的成本較高，并且搜索效率較低。

發明內容

本發明實施例提供一種基于Hbase數據庫的多條件搜索方法及裝置，解決了現有技術中的基于HBase數據庫的多條件組合的搜索方法使多條件組合搜索的成本較高，并且搜索效率較低的技術問題。

本發明實施例提供一種基于Hbase數據庫的多條件搜索方法，包括：

接收用戶通過終端設備輸入的多個搜索字段；

判斷是否存在與所述多個搜索字段對應的多條件組合鍵值對關系；

若不存在與所述多個搜索字段對應的多條件組合鍵值對關系，則通過分布式搜索引擎根據所述多個搜索字段進行搜索，并輸出滿足所述多個搜索字段的記錄集合；

根據所述記錄集合的每個記錄中的任一字段的鍵值對關系從所述Hbase數據庫中讀取對應的完整數據。

本發明實施例提供一種基于Hbase數據庫的多條件搜索裝置，包括：

接收模塊，用于接收用戶通過終端設備輸入的多個搜索字段；

判斷模塊，用于判斷是否存在與所述多個搜索字段對應的多條件組合鍵值對關系；

分布式引擎一級搜索模塊，用于若不存在與所述多個搜索字段對應的多條件組合鍵值對關系，則通過分布式搜索引擎根據所述多個搜索字段進行搜索，并輸出滿足所述多個搜索字段的記錄集合；

Hbase數據庫二級搜索模塊，用于根據所述記錄集合的每個記錄中的任一字段的鍵值對關系從所述Hbase數據庫中讀取對應的完整數據。

本發明實施例提供一種基于Hbase數據庫的多條件搜索方法及裝置，通過接收用戶通過終端設備輸入的多個搜索字段；判斷是否存在與多個搜索字段對應的多條件組合鍵值對關系；若不存在與多個搜索字段對應的多條件組合鍵值對關系，則通過分布式搜索引擎根據多個搜索字段進行搜索，并輸出滿足多個搜索字段的記錄集合；根據記錄集合的每個記錄中的任一字段的鍵值對關系從Hbase數據庫中讀取對應的完整數據。能夠通過分布式搜索引擎進行一級索引，并通過任一字段的鍵值對關系在Hbase數據庫中進行二級索引，將多條件組合搜索方法采用兩級索引的方式進行搜索，由于每一級索引均能提高搜索效率，進而提升了整個多條件組合搜索的效率，并且不依賴于多條件組合鍵值對關系進行的搜索，所以減少了多條件組合搜索的成本。

附圖說明