[發(fā)明專利]一種基于大數(shù)據(jù)技術(shù)的海量文檔關(guān)鍵詞快速檢索方法在審
| 申請?zhí)枺?/td> | 201611001973.2 | 申請日: | 2016-11-14 |
| 公開(公告)號: | CN108073616A | 公開(公告)日: | 2018-05-25 |
| 發(fā)明(設(shè)計)人: | 陳瑞 | 申請(專利權(quán))人: | 北京航天長峰科技工業(yè)集團(tuán)有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 暫無信息 | 代理人: | 暫無信息 |
| 地址: | 100854*** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 字段 文檔關(guān)鍵詞 快速檢索 大數(shù)據(jù) 結(jié)果集 并行執(zhí)行 符合條件 階段步驟 搜索請求 預(yù)置條件 總控制臺 最終結(jié)果 返回 特征詞 迭代 記錄 權(quán)重 排序 檢索 搜索 指令 合并 投票 統(tǒng)一 | ||
1.一種基于大數(shù)據(jù)技術(shù)的海量文檔關(guān)鍵詞快速檢索方法,其特征在于:
(1)搭建海量數(shù)據(jù)索引云服務(wù),實現(xiàn)索引存儲負(fù)載的均衡化,具體實現(xiàn)過程包括如下步驟:
(10)搜索請求開始;
(11)根據(jù)總控制臺指令,分別向各個shard分片進(jìn)行搜索;
(12)獲取各自檢索的記錄;
(13)匯集各分片初始結(jié)果集;
(14)對初始結(jié)果集進(jìn)行排序,按照預(yù)置條件要求,返回符合條件的記錄;
(15)通過上一階段步驟(14)獲取的信息,進(jìn)行字段值選擇;
(16)并行執(zhí)行任務(wù),去各個shard獲取字段值信息;
(17)匯總各個shard的字段值信息;
(18)收集各分片的最終結(jié)果;
(19)合并結(jié)果,統(tǒng)一返回;
(2)優(yōu)化異構(gòu)數(shù)據(jù)內(nèi)容解析算法,使其解析更準(zhǔn)確:運用textrank提取關(guān)鍵詞,根據(jù)每一個詞的權(quán)重,再進(jìn)行下一步的投票以及迭代的操作來獲取文章的特征詞。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于北京航天長峰科技工業(yè)集團(tuán)有限公司,未經(jīng)北京航天長峰科技工業(yè)集團(tuán)有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201611001973.2/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 基于大數(shù)據(jù)平臺的網(wǎng)絡(luò)安全實施系統(tǒng)及方法
- 基于事件驅(qū)動的智慧城市大數(shù)據(jù)體系及處理方法
- 一種大數(shù)據(jù)應(yīng)用開發(fā)的系統(tǒng)及方法
- 家用設(shè)備報告的生成方法、大數(shù)據(jù)系統(tǒng)和存儲介質(zhì)
- 一種基于計算機(jī)大數(shù)據(jù)的平臺架構(gòu)
- 一種大數(shù)據(jù)處理系統(tǒng)
- 面向工業(yè)4.0的時空大數(shù)據(jù)分布式存儲檢索方法及系統(tǒng)
- 一種聯(lián)網(wǎng)式醫(yī)療大數(shù)據(jù)分級傳輸方法及系統(tǒng)
- 一種大數(shù)據(jù)信息監(jiān)控方法、裝置及計算機(jī)設(shè)備
- 一種知識產(chǎn)權(quán)大數(shù)據(jù)情報檢索系統(tǒng)





