[發明專利]信息收集設備和信息收集方法在審
| 申請號: | 201710229239.X | 申請日: | 2017-04-10 |
| 公開(公告)號: | CN108694198A | 公開(公告)日: | 2018-10-23 |
| 發明(設計)人: | 張波;孟遙;孫俊 | 申請(專利權)人: | 富士通株式會社 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 北京集佳知識產權代理有限公司 11227 | 代理人: | 李春暉;李德山 |
| 地址: | 日本神*** | 國省代碼: | 日本;JP |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 關鍵詞庫 信息收集設備 檢索 判定 核心詞組 信息收集 詞庫選擇 檢索單元 快速收集 判定單元 預定概率 信息庫 核心詞 配置 | ||
1.一種信息收集設備,包括:
檢索單元,被配置成以預定概率選擇關鍵詞庫,在選擇了所述關鍵詞庫的情況下,從所述關鍵詞庫中選擇關鍵詞作為當前擴展詞以與指定核心詞組合進行檢索,而在未選擇所述關鍵詞庫的情況下,從擴展詞庫選擇擴展詞作為所述當前擴展詞以與所述指定核心詞組合進行檢索或者僅使用所述指定核心詞進行檢索;以及
判定單元,被配置成以預定的判定模型判定所檢索到的信息是否有用,并將判定有用的信息加入到信息庫中。
2.根據權利要求1所述的信息收集設備,其中,所述關鍵詞庫是由從所述信息庫中的已有信息與所述指定核心詞相關聯地提取的關鍵詞組成的,并且所述檢索單元進一步被配置成從所述關鍵詞庫隨機選擇關鍵詞作為所述當前擴展詞。
3.根據權利要求1或2所述的信息收集設備,還包括:關鍵詞庫更新單元,被配置成從所述信息庫中的未提取過關鍵詞的信息提取與所述指定核心詞相關的關鍵詞加入到所述關鍵詞庫中,以更新所述關鍵詞庫。
4.根據權利要求3所述的信息收集設備,還包括:控制單元,被配置成控制所述檢索單元、所述判定單元和所述關鍵詞提取單元重復執行各自的操作,直至滿足預定要求為止。
5.根據權利要求1所述的信息收集設備,其中,所述判定模型是以下述方式訓練得到的:
以一個或多個預定核心詞以及/或者一個或多個預定核心詞與所述擴展詞庫中的一個或多個擴展詞的組合進行檢索,將檢索得到的預定數量的信息標記后加入訓練集合,并且將標記為有用的信息加入到所述信息庫中;以及
利用所述訓練集合對深度增強學習模型進行訓練以得到所述判定模型。
6.根據權利要求1所述的信息收集設備,其中,所述檢索單元進一步被配置成:在未選擇所述關鍵詞庫的情況下,基于核心詞檢索成功率和所述擴展詞庫中的各個擴展詞的檢索成功率,從所述擴展詞庫中選擇擴展詞作為所述當前擴展詞或者僅使用所述指定核心詞進行檢索。
7.根據權利要求6所述的信息收集設備,其中,所述檢索單元進一步被配置成如果所述核心詞檢索成功率較高,則僅使用所述指定核心詞進行檢索,并且所述判定單元將檢索得到的預定數量的信息當中的、所述判定模型判定為有用的信息加入到所述信息庫中。
8.根據權利要求6所述的信息收集設備,其中,所述檢索單元進一步被配置成如果所述擴展詞庫中的某一擴展詞的檢索成功率較高,則選擇該擴展詞作為所述當前擴展詞與所述指定核心詞組合進行檢索,并且所述判定單元將檢索得到的預定數量的信息當中的、所述判定模型判定為有用的信息加入到所述信息庫中。
9.根據權利要求7或8所述的信息收集設備,其中,所述判定單元進一步被配置成在將所述判定模型判定為有用的信息加入到所述信息庫中之后,更新所述核心詞檢索成功率或所述當前擴展詞的檢索成功率。
10.一種信息收集方法,包括:
以預定概率選擇關鍵詞庫,在選擇了所述關鍵詞庫的情況下,從所述關鍵詞庫中選擇關鍵詞作為當前擴展詞以與指定核心詞組合進行檢索,而在未選擇所述關鍵詞庫的情況下,從擴展詞庫選擇擴展詞作為所述當前擴展詞以與所述指定核心詞組合進行檢索或者僅使用所述指定核心詞進行檢索;以及
以預定的判定模型判定所檢索到的信息是否有用,并將判定有用的信息加入到信息庫中。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于富士通株式會社,未經富士通株式會社許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710229239.X/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:超文本抓取方法和裝置
- 下一篇:數據同步裝置、方法、存儲介質及電子設備





