[發明專利]一種知識挖掘方法、平臺、系統及存儲介質有效
| 申請號: | 202110681170.0 | 申請日: | 2021-06-18 |
| 公開(公告)號: | CN113434571B | 公開(公告)日: | 2023-08-22 |
| 發明(設計)人: | 簡仁賢;許鵬;彭亮;張夢真;閆鳴宇 | 申請(專利權)人: | 竹間智能科技(上海)有限公司 |
| 主分類號: | G06F16/2458 | 分類號: | G06F16/2458;G06F16/26;G06F16/36;G06F18/22 |
| 代理公司: | 北京酷愛智慧知識產權代理有限公司 11514 | 代理人: | 鐘繼蓮 |
| 地址: | 200030 上海市徐*** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 知識 挖掘 方法 平臺 系統 存儲 介質 | ||
1.一種知識挖掘方法,其特征在于,包括:
從不同的數據源獲取外部數據,將外部數據的結構統一轉換為預設的內部結構,構建第一數據集;
將所述第一數據集內的數據結構轉換為挖掘節點的數據結構類型,構建第二數據集;
根據所述挖掘節點的任務類型,同時執行N個相應的挖掘算法對所述第二數據集中的數據進行挖掘,生成知識結果集,N為大于等于1的正整數;
對所述知識結果集中的知識結果進行去重處理;
對去重處理后的所述知識結果集進行存儲,具體包括:
將知識結果和與每個所述知識結果一一對應的數據源和挖掘算法進行分層存儲,每一層均存儲到緩存器中。
2.根據權利要求1所述的一種知識挖掘方法,其特征在于,通過數據下載軟件從數據源獲取外部數據。
3.根據權利要求1所述的一種知識挖掘方法,其特征在于,所述挖掘節點的任務類型包括標準問語料擴寫、構建知識圖譜和挖掘日志聚類中的一種。
4.根據權利要求1所述的一種知識挖掘方法,其特征在于,對所述知識結果集中的知識結果進行去重處理,具體包括:
采用逐一比對的方法計算所述知識結果集中不同知識結果之間的相似度,去除所述知識結果集中相似度高于閾值的兩條知識結果之一。
5.根據權利要求4所述的一種知識挖掘方法,其特征在于,相似度高于閾值的兩條知識結果包括重合的兩條知識結果。
6.一種知識挖掘平臺,其特征在于,包括:
第一數據集構建模塊,用于從不同的數據源獲取外部數據,將外部數據的結構統一轉換為預設的內部結構,構建第一數據集;
第二數據集構建模塊,用于將所述第一數據集內的數據結構轉換為挖掘節點的數據結構類型,構建第二數據集;
知識結果集生成模塊,用于根據所述挖掘節點的任務類型,同時執行N個相應的挖掘算法對所述第二數據集中的數據進行挖掘,生成知識結果集,N為大于等于1的正整數;
去重處理模塊,用于對所述知識結果集中的知識結果進行去重處理;
存儲模塊,用于對去重處理后的所述知識結果集進行存儲,具體包括:將知識結果和與每個所述知識結果一一對應的數據源和挖掘算法進行分層存儲,每一層均存儲到緩存器中。
7.一種知識挖掘系統,其特征在于,包括處理器、輸入設備、輸出設備和存儲器,所述處理器、輸入設備、輸出設備和存儲器相互連接,其中,所述存儲器用于存儲計算機程序,所述計算機程序包括程序指令,所述處理器被配置用于調用所述程序指令,執行如權利要求1-5任一項所述的方法。
8.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質存儲有計算機程序,所述計算機程序包括程序指令,所述程序指令當被處理器執行時使所述處理器執行如權利要求1-5任一項所述的方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于竹間智能科技(上海)有限公司,未經竹間智能科技(上海)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110681170.0/1.html,轉載請聲明來源鉆瓜專利網。





