[發明專利]一種可視化數據處理解析系統及其處理方法

在審

• 申請號: 201910534416.4
• 申請日: 2019-06-20
• 公開（公告）號: CN110222169A
• 公開（公告）日: 2019-09-10
• 發明（設計）人: 牛海軍;井燕芳;劉鵬;朱琳;楊海峰;季飛;李雄杰;陳南生;王厚超;王入仟
• 申請（專利權）人: 中國人民解放軍陸軍特種作戰學院
• 主分類號: G06F16/34
• 分類號: G06F16/34;G06F16/35
• 代理公司: 桂林市華杰專利商標事務所有限責任公司 45112
• 代理人: 劉梅芳

本發明公開了一種可視化數據處理解析系統，包括：數據訪問模塊、模型執行引擎模塊、模型生成模塊、模型執行模塊、模型管理模塊和解析算法管理模塊；所述數據訪問模塊位于數據層，所述模型執行引擎模塊位于邏輯層，所述模型生成模塊、模型執行模塊、模型管理模塊和解析算法管理模塊位于應用層。本發明能解析處理多種類型的數據，并且可以對數據解析協議庫進行管理，擴充新的數據解析協議。該方法處理前支持對原始數據的備份存儲，并且按照日期、數據類型分類；對于已經解析導入的數據記錄日志，防止數據重復導入；在數據處理過程中可以進行奇異值過濾、數據篩選，并且會進行異常值提醒。

技術領域

本發明屬于數據處理技術領域，具體涉及一種可視化數據處理解析系統及其處理方法。

背景技術

目前裝備數據的種類越來越多，除了常規的表格數據以外，各類裝備總線數據、音視頻數據、氣象環境數據、電磁頻譜數據、指揮控制數據等都是單獨進行測試采集和處理，都是基于多臺采集設備采集和記錄數據，這就造成了不同采集設備采集的數據在時間上會有一些差異（也使得各設備采集采樣時刻不一致），但根據一些試驗鑒定科目的要求，必須要把同一科目的來自不同采集器的相關參數放在一起分析才能對裝備的性能、效能、適應性作出準確的判斷，也就是要在統一的時間基準上對相關參數進行分析。

為此，我們提出一種可視化數據處理解析系統及其處理方法，以解決上述背景技術中提到的問題。

發明內容

本發明的目的在于提供一種可視化數據處理解析系統及其處理方法，以解決上述背景技術中提出的問題。

為實現上述目的，本發明提供如下技術方案：一種可視化數據處理解析系統，包括：

數據訪問模塊、模型執行引擎模塊、模型生成模塊、模型執行模塊、模型管理模塊和解析算法管理模塊；

所述數據訪問模塊位于數據層，所述模型執行引擎模塊位于邏輯層，所述模型生成模塊、模型執行模塊、模型管理模塊和解析算法管理模塊位于應用層。

優選的，所述模型執行引擎模塊包括有數據抽取模塊、數據過濾模塊、數據轉換模塊、數據加載模塊。

優選的，所述數據抽取模塊、數據過濾模塊、數據轉換模塊、數據加載模塊，其分別用于數據抽取、數據過濾、數據轉換和數據加載，其中數據抽取添加數據處理流程的節點，必須包含輸入節點和輸出節點、數據過濾為過濾出不符合要求的數據，數據轉換可以對不同類型的數據進行轉換。

優選的，所述數據訪問模塊用于對數據進行訪問。

本發明還提供了一種可視化數據處理解析系統的處理方法，具體包括以下步驟：

S1、添加數據處理流程的節點，必須包含輸入節點和輸出節點，可以選擇的節點類型還包括轉換節點和過濾節點，過濾節點可以根據相關配置在數據處理過程中過濾出不符合要求的數據，轉換節點可以對不同類型的數據進行轉換，比如對數值或者時間進行增加減少，每種類型在數據處理流程中都已存在多個；

S2、創建數據處理流程，通過可視化的方式使用有向線段連接兩個節點來創建數據處理流程，需要把輸入節點放置在數據處理流程的最開始位置，把數據輸出放置在流程結束的位置；

S3、對節點進行配置，不同的節點需要的配置不同，比如輸入節點需要配置輸入源信息，輸出節點需要配置輸出位置的消息，過濾節點需要配置過濾條件，轉換節點需要配置轉換的具體操作；

S4、直接開始運行整個輸出處理流程，對數據進行處理，數據協議需要是滿足條件的動態鏈接庫文件，在添加數據解析協議的時候，需要設置數據解析協議文件并且輸入協議的名稱。