[發明專利]一種Migo搜索引擎有效
| 申請號: | 201810370233.9 | 申請日: | 2018-04-24 |
| 公開(公告)號: | CN108520079B | 公開(公告)日: | 2021-10-26 |
| 發明(設計)人: | 馮少龍;梁鏡泉 | 申請(專利權)人: | 珠海市新德匯信息技術有限公司 |
| 主分類號: | G06F16/2453 | 分類號: | G06F16/2453;G06F16/21;G06F40/289 |
| 代理公司: | 暫無信息 | 代理人: | 暫無信息 |
| 地址: | 519000 廣東省珠海市高新區唐家*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 migo 搜索引擎 | ||
本發明公開了一種Migo搜索引擎,包括索引數據庫、全文檢索模塊、精確檢索模塊、時空分析模塊,關系擴展模塊。本發明的有益效果是,在相同的硬件配置下,使用Migo搜索引擎,硬件成本更廉價,檢索效率更快,分析應用更高效的低成本內存數據庫。
技術領域
本發明涉及搜索引擎改進,特別是一種Migo搜索引擎。
背景技術
公安信息在情報的應用主要基于大數據的實時分析和處理,而目前大部分公安系統使用的仍是以長駐磁盤的傳統數據庫,隨著數據的增長和規模化應用,傳統的數據庫已達到了維持系統高效運轉的瓶頸,在服務器配置有限的情況下,Oracle數據庫在數十億數據量中檢索效率低下;數據維護困難復雜,當數據字段發生變化,數據與數據之間原有的關系代碼無法適用,需要重新調整代碼,成本高,且不利于維護。
發明內容
本發明的目的是為了解決上述問題,設計了一種Migo搜索引擎。
實現上述目的本發明的技術方案為,一種Migo搜索引擎,包括,
索引數據庫,用于儲存數據索引信息,供搜索引擎使用;
全文檢索模塊,利用Key-Value的格式分別對詞與行ID集合的存儲,Value中只存儲錨點信息,錨點信息標識ID集的開始位置與結束位置,對檢索的關鍵字進行判斷是否能分詞,若可以分詞,則將關鍵詞分開進行檢索,若不能分詞,則直接檢索;
精確檢索模塊,用于應用到批量比對,無需分詞;
時空分析模塊,用于通過把時間的粒度大小和空間的廣度進行預設,再通過聚合索引分析出人的同行關系,以此分析與主體對象的伴隨關系;
關系擴展模塊,用于提供標識對象的功能,當兩個對象在同一條記錄中,則認為可建立關系。
作為優選,所述全文檢索模塊,利用Key-Value的格式分別對詞與行ID集合的存儲,Value中只存儲錨點信息,錨點信息標識ID集的開始位置與結束位置,對檢索的關鍵字進行判斷是否能分詞,若可以分詞,則將關鍵詞分開進行檢索,若不能分詞,則直接檢索,其具體為,系統會根據詞表對檢索的關鍵字進行判斷是否能分詞,判斷該關鍵字能否分詞,若可以分詞,則根據分詞的個數各自進行操作,通過索引塊數據表讀取字節流,取得行號,再回到數據錨點表,查對應的字節流位置,并將各個分詞的搜索結果進行交集從數據明細表中獲取詳細記錄;若未取到行號,則停止操作。
作為優選,所述時空分析模塊根據人員對時間的粒度大小和空間的分布進行關聯。
作為優選,所述關系擴展模塊用于提供標識對象的功能,當兩個對象在同一條記錄中,則認為可建立關系,其具體為,輸入對象,系統根據精確索引的方式檢索出所有相關的詳細記錄;在記錄中提取標識對象,則該對象與主體對象存在關聯。
作為優選,所述關系擴展模塊通過兩個對象分別進行關聯擴展,再對各自分析關聯的標識對象進行交集,從而擴線分析兩者之間存在關聯關系的層數。
一種應用于Migo搜索引擎的搜索方法,該方法包括,
步驟一:全文檢索,判斷輸入的關鍵詞是否能分詞,并將分離后的關鍵詞分別進行檢索,并對檢索結果進行交集,顯示交集后的詳細記錄,
步驟二:精確檢索,對輸入的關鍵詞進行檢索,并輸出檢索結果;
步驟三:時空分析,將時間的粒度大小和空間的廣度進行預設,再通過聚合索引分析出人的同行關系,以此分析與主體對象的伴隨關系;
步驟四:關系擴展,提供標識對象的功能,當兩個對象在同一條記錄中,則認為可建立關系或者可以通過兩個對象分別進行關聯擴展,再對各自分析關聯的標識對象進行交集,從而擴線分析兩者之間存在關聯關系的層數。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于珠海市新德匯信息技術有限公司,未經珠海市新德匯信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810370233.9/2.html,轉載請聲明來源鉆瓜專利網。





