[發明專利]一種人工智能信息處理系統、方法及可讀存儲介質

在審

• 申請號: 202011186199.3
• 申請日: 2020-10-29
• 公開（公告）號: CN112199571A
• 公開（公告）日: 2021-01-08
• 發明（設計）人: 烏斯曼·可·尼亞齊
• 申請（專利權）人: 廣州市西美信息科技有限公司
• 主分類號: G06F16/951
• 分類號: G06F16/951;G06F16/35;G06F40/117;G06F40/205;G06K9/62;G06F16/28
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 郭浩輝;顏希文

本發明公開了一種人工智能信息處理系統、方法及可讀存儲介質，包括：對用戶進行信息爬取時所得到的爬取信息進行類別劃分與信息增強并上傳至云端；獲取云端針對信息增強后的爬取信息所創建的初始信息爬取模型，通過迭代法對各自的初始信息爬取模型進行訓練，并將訓練后的初始信息爬取模型發送至云端；云端通過融合算法對各中間件訓練后的初始信息爬取模型進行融合得到目標信息爬取模型，并將該目標信息爬取模型下發至用戶端進行互聯網信息的爬取。本發明能夠對當前海量的、無規則的數據進行準確爬取與分析，減少達到指定信息爬取精度所需的網絡開銷，滿足了實際應用需求。

技術領域

本發明涉及信息處理技術領域，特別是涉及一種人工智能信息處理系統、方法及可讀存儲介質。

背景技術

互聯網，又稱國際網絡，指的是網絡與網絡之間所串連成的龐大網絡，這些網絡以一組通用的協議相連，形成邏輯上的單一巨大國際網絡。隨著互聯網技術的發展，近年來信息的傳播也變得越來越快，互聯網上的信息也越來越多，并且這些信息有著不同的文本格式及表現方式，且紛繁復雜。

目前，互聯網上主要存在兩種形式的信息，一種是結構化的信息，另外一種是非結構化的信息。對于結構化的信息，我們可以使用傳統的網絡爬取軟件及數據分析軟件即可完成信息的獲取及相關分析。傳統的爬取軟件有火車頭、八爪魚等。傳統的數據分析軟件主要有Excel，SPSS，SAS等。

然而，隨著大數據時代的到來，信息膨脹，對于這些海量的、無規則的數據，我們當前傳統的分析技術是無法完成此數據分析需求的。若需要處理這些非結構化數據，需要擁有一個技術團隊，對于企業而言，面臨著技術成本高、操作難度大等問題。

發明內容

為了解決上述問題，本發明的目的是提供一種能夠對當前海量的、無規則的數據進行準確爬取與分析，減少達到指定信息爬取精度所需的網絡開銷的人工智能信息處理系統、方法及可讀存儲介質。

根據本發明提供的人工智能信息處理系統，包括：

用戶端，對用戶進行信息爬取時所得到的爬取信息進行類別劃分與信息增強并上傳至云端；

中間件，獲取云端針對信息增強后的爬取信息所創建的初始信息爬取模型，通過迭代法對各自的初始信息爬取模型進行訓練，并將訓練后的初始信息爬取模型發送至云端；

云端，通過融合算法對各中間件訓練后的初始信息爬取模型進行融合得到目標信息爬取模型，并將該目標信息爬取模型下發至用戶端進行互聯網信息的爬取。

根據本發明提供的人工智能信息處理系統，首先用戶端對用戶進行信息爬取時所得到的爬取信息進行類別劃分與信息增強后上傳至云端，以使云端根據信息增強后的爬取信息創建中間件；中間件接收云端針對信息增強后的爬取信息所創建的初始信息爬取模型，并通過迭代法對各自的初始信息爬取模型進行訓練，并將訓練后的初始信息爬取模型發送至云端，使數據分布的不平衡性得到緩解，降低信息爬取模型的偏差并提升模型準確度，從而使該模型在不平衡爬取信息的情況下訓練得到的信息爬取模型具有較高的信息爬取精度；云端通過融合算法對各中間件訓練后的初始信息爬取模型進行融合得到目標信息爬取模型，并將該目標信息爬取模型下發至用戶端進行互聯網信息的爬取，從而使該信息爬取模型具有較高的信息爬取精度，并且減少了達到指定信息爬取精度所需的網絡開銷，滿足了實際應用需求。

另外，根據本發明上述的人工智能信息處理系統，還可以具有如下附加的技術特征：

進一步地，所述用戶端包括：

信息爬取子系統，獲取用戶當前所處的應用環境及所需爬取的爬取信息，并根據所述應用環境及爬取信息進行互聯網信息的爬取；

信息處理子系統，對所述信息爬取子系統所爬取到的互聯網信息進行識別、篩選與整理后上傳至云端。

進一步地，所述信息爬取子系統包括：