[發明專利]一種基于大數據的可視化模型建立分析系統和方法

在審

• 申請號: 202011536216.1
• 申請日: 2020-12-23
• 公開（公告）號: CN112667735A
• 公開（公告）日: 2021-04-16
• 發明（設計）人: 張凱
• 申請（專利權）人: 武漢烽火眾智數字技術有限責任公司
• 主分類號: G06F16/26
• 分類號: G06F16/26;G06F16/25;G06F16/27;G06K9/62
• 代理公司: 北京匯澤知識產權代理有限公司 11228
• 代理人: 吳靜

1.一種基于大數據的可視化模型建立分析系統，其特征在于，包括：

數據資產模塊、數據運算模塊、算法模型模塊和前端展現模塊；其中

數據資產模塊，用于數據源的設置，數據資源的創建，采用手動創建或資源綁定的方式將用戶數據更新到系統，用戶通過拖拽手工建模的方式，處理用戶數據；

數據運算模塊，用于對數據源進行數據的ETL處理，發現并糾正數據文件中可識別的錯誤；

算法模型模塊，用于利用機器學習中經典算法對大量數據進行建模，然后利用模型進行預測；

前端展現模塊，用于對已經處理過的數據或者未曾處理的數據進行圖形化展現。

2.如權利要求1的一種基于大數據的可視化模型建立分析系統，其特征在于，數據資產模塊的上傳數據方式至少包括：本地文件上傳、接口數據上傳、數據庫上傳。

3.如權利要求2的一種基于大數據的可視化模型建立分析系統，其特征在于，數據庫上傳支持的數據庫至少包括：ORACLE、MYSQL、HIVE。

4.如權利要求1的一種基于大數據的可視化模型建立分析系統，其特征在于，通過檢查數據一致性、處理無效值和缺失值，實現發現并糾正數據文件中可識別的錯誤。

5.如權利要求1的一種基于大數據的可視化模型建立分析系統，其特征在于，數據運算模塊至少包括：Sql處理子模塊、抽樣子模塊、分類匯總子模塊、合并數據子模塊、刪除重復子模塊、數據分區子模塊、排序子模塊、數據離散化子模塊、數據標準化子模塊、過濾變量子模塊、轉置子模塊、字段重排子模塊、缺失值處理子模塊、離群值處理子模塊、查找轉換子模塊、插入變量子模塊、加權子模塊、樣本均衡子模塊、分詞解析子模塊。

6.如權利要求1的一種基于大數據的可視化模型建立分析系統，其特征在于，算法模型模塊至少包括：Apriori算法子模塊、Kmeans算法子模塊、樸素貝葉斯算法子模塊、邏輯回歸算法子模塊、嶺回歸算法子模塊、LASSO算法子模塊、線性回歸算法子模塊。

7.如權利要求1的一種基于大數據的可視化模型建立分析系統，其特征在于，前端展現模塊畫布的實現使用以下相關前端組件：jsPlumb、vue、elementui、draggable、axios；通過拖拉拽的方式可視化的操作組件來進行試驗，依據已建立好的業務模型進行數據運算與算法分析，將結果數據集通過連接好的前端展現模塊中的圖表進行可視化多維度的展現。

8.如權利要求7的一種基于大數據的可視化模型建立分析系統，其特征在于，可視化多維度的展現包括：以不同的數據結構以不同的圖表類型進行直觀的展現；以下鉆的形式進行多維度數據的展示；以節點定制化展示形式來對特殊數據進行定制化的展現；以多圖聯動展示的形式對數據進行展現。

9.一種基于大數據的可視化模型建立分析方法，其特征在于，包括：

將需要處理的數據源利用數據資產中添加數據源節點將數據上傳到系統上以備后續使用；

根據業務場景的需要，利用數據運算模塊中的功能節點對數據進行過濾，如利用缺失值處理將數據中字段為空的一行數據刪除，利用過濾變量將業務需要的字段進行保留，其他字段刪除處理等一系列處理，獲取想要的特定格式的數據；

如果業務場景中沒有對算法的需求，就可以利用前端展現模塊的圖形化進行最終的數據的展現；在前端展現功能節點的選擇上圖形種類繁多，根據需求來選擇不同的圖形進行數據表現；如果需要用到算法，就需要加入算法節點；

選擇完相應節點，將數據源節點、數據運算節點、算法模型節點或者無、前端展現節點進行連接保存，點擊運行就可以跑通整個流程，將最終數據以血緣分析圖形化展現出來。