[發明專利]一種基于內容識別的多源異構情報匯聚協同處理平臺

在審

• 申請號: 202110541644.1
• 申請日: 2021-05-18
• 公開（公告）號: CN113360599A
• 公開（公告）日: 2021-09-07
• 發明（設計）人: 付睿智;田苗;張建斌
• 申請（專利權）人: 蘇州海賽人工智能有限公司
• 主分類號: G06F16/33
• 分類號: G06F16/33;G06F16/35;G06F16/38;G06K9/32;G06F16/31
• 代理公司: 北京中仟知識產權代理事務所(普通合伙) 11825
• 代理人: 周慶佳

本發明公開了一種基于內容識別的多源異構情報匯聚協同處理平臺，包括：基礎環境層、數據資源層、業務處理層和應用服務層，所述基礎環境層包括：硬件支撐環境和軟件支撐環境，所述硬件支撐環境包括：分布式存儲環境和分布式計算環境；數據資源層包括：地圖數據、業務數據、全文檢索數據、非結構化數據、業務處理中間數據和業務處理結果數據，所述數據資源層為業務處理層提供統一的數據來源與支撐；所述業務處理層包括：多源數據匯集模塊、預處理模塊和自動監控入庫模塊；能夠很方便的使大量數據具有搜索、分析和探索的能力，支持單位，類型，時間，熱點，關鍵詞等多維情報查詢，實現近實時地對文檔進行全文本搜索，有效提高數據全文檢索的效率。

技術領域

本發明涉及情報信息共享協作系統技術領域，尤其涉及一種基于內容識別的多源異構情報匯聚協同處理平臺。

背景技術

從國際發展看，隨著各國人工智能、大數據、云計算等高新技術在軍事領域的融合發展，國防科技情報服務正加速推進傳統文獻電子化、異構數據整合化、領域知識關聯化，未來戰爭形態逐步由信息化轉變為智能化。智能技術與軍事情報的一體化發展為美國等發達國家的戰略、組織、優先事項和資源分配帶來了重大變革。國防領域情報工作已經不再是以往的人工手動搜集處理分析的狀態，自動化、智能化已經成為情報發展的必然趨勢。

目前，陸軍情報系統經過多年建設，初步構建了情報數據傳輸與處理基礎設施，累積了海量的情報數據，類型包括格式化、半格式化、非格式化數據，承載形式包括文本、數據包、圖片、視頻、高分影像等，對這些類型不一、格式不一、結構不一的數據尚無統一的平臺進行有效整合處理。情報數據的集中存儲、高效查詢、關聯運用正成為亟待解決的重要課題。突出表現為以下問題：一是硬件環境薄弱，不能滿足數據日益增長的需求。二是數據高度分散，沒有形成關聯運用能力。三是數據標準不統一，缺少預處理方法和技術。四是深度挖掘不夠，尚未發揮海量數據情報價值。五是共享服務能力弱，多樣化按需保障能力不夠。

基于上述背景，現有業務系統中累積了海量的格式化、半格式化、非格式化情報數據，承載形式包括文本、數據包、圖片、視頻、高分影像等，對這些類型不一、格式不一、結構不一的數據目前尚無統一的平臺進行有效整合處理。傳統的整合方式仍然停留在人工程度，大多數依賴于情報處理人員的人工識別判斷，包括人工上傳、人工分類入庫，在數據規模、數據處理的及時性、高效性、準確性上亟待提升。另一方面，以目前累積的海量情報數據的運用情況來看，針對高度分散的情報數據，尚未形成關聯運用的能力，數據的深度挖掘不夠，尚未發揮海量數據的情報價值，同時，由于不同格式的情報數據很難完成自動分級分類存儲，數據規模、質量和應用水平都有待優化，從而導致情報人員獲取有效數據的效率較低。

發明內容

本發明克服了現有技術的不足，提供一種基于內容識別的多源異構情報匯聚協同處理平臺。

為達到上述目的，本發明采用的技術方案為：一種基于內容識別的多源異構情報匯聚協同處理平臺，包括：基礎環境層、數據資源層、業務處理層和應用服務層，所述基礎環境層包括：硬件支撐環境和軟件支撐環境，所述硬件支撐環境包括：分布式存儲環境和分布式計算環境。

數據資源層包括：地圖數據、業務數據、全文檢索數據、非結構化數據、業務處理中間數據和業務處理結果數據，所述數據資源層用于管理與存儲業務處理層處理情報過程中產生的中間數據和結果數據，且所述數據資源層為業務處理層提供統一的數據來源與支撐。

所述業務處理層包括：若干個基礎模塊，若干個所述基礎模塊包括：多源數據匯集模塊、預處理模塊和自動監控入庫模塊；所述應用服務層用于在業務處理的基礎上提供全文檢索以及情報數據分類展示。

本發明一個較佳實施例中，所述業務處理層還包括：備份模塊、文件移動模塊、預處理模塊、系統核心模塊、提取模塊。

本發明一個較佳實施例中，所述軟件支撐環境包括：MySQL數據庫、搜索Elasticsearch引擎、Java/Python開發環境和Docker應用容器引擎。