[發明專利]一種多源海量數據處理系統及方法

有效

• 申請號: 201810074821.8
• 申請日: 2018-01-25
• 公開（公告）號: CN108427709B
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 周康;余河金;夏晨俊;劉利民;王平喜;徐長軍;鄭新標;焦國云
• 申請（專利權）人: 朗新科技集團股份有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 王瑩;李相雨

本發明實施例提供一種多源海量數據處理系統及方法，所述系統包括計算模塊和任務管理模塊，其中：所述計算模塊用于接收多源海量數據，并調取數據接收服務解析所述多源海量數據；所述多源海量數據是根據預先在所述任務管理模塊中配置的任務所產生的開源數據；所述計算模塊若接收到外界選擇的預設模型的確認動作，將解析后的多源海量數據輸入所述預設模型，以供分析所述預設模型的輸出結果。所述方法使用所述系統。本發明實施例提供的多源海量數據處理系統及方法，通過調取數據接收服務解析多源海量數據，將解析后的多源海量數據輸入預設模型，并根據預設模型的輸出結果分析多源海量數據，不僅使企業系統高效兼容多源海量數據，還能夠有效利用該多源海量數據進行數據分析。

技術領域

本發明實施例涉及數據處理技術領域，具體涉及一種多源海量數據處理系統及方法。

背景技術

隨著大數據技術的發展，數據的來源也越來越廣泛，然而某些系統并不兼容某些來源的數據，給數據應用帶來了難度。

現有技術是通過獲取數據來源方的授權，或者根據數據來源方的相應產品編譯程序代碼來使企業系統兼容多源海量數據。但是數據來源方有很多，導致現有技術的效率尤其低下。

因此，如何避免上述的技術缺陷，并使企業系統高效兼容多源海量數據，并有效利用該多源海量數據進行數據分析，成為亟須解決的問題。

發明內容

針對現有技術存在的問題，本發明實施例提供一種多源海量數據處理系統及方法。

第一方面，本發明實施例提供一種多源海量數據處理系統，所述系統包括計算模塊和任務管理模塊，其中：

所述計算模塊用于接收多源海量數據，并調取數據接收服務解析所述多源海量數據；所述多源海量數據是根據預先在所述任務管理模塊中配置的任務所產生的開源數據；

所述計算模塊若接收到外界選擇的預設模型的確認動作，將解析后的多源海量數據輸入所述預設模型，以供分析所述預設模型的輸出結果。

第二方面，本發明實施例提供一種多源海量數據處理方法，所述方法包括：

接收多源海量數據，并調取數據接收服務解析所述多源海量數據；所述多源海量數據是根據預先配置的任務所產生的開源數據；

若接收到外界選擇的預設模型的確認動作，將解析后的多源海量數據輸入所述預設模型，以供分析所述預設模型的輸出結果。

第三方面，本發明實施例提供一種電子設備，包括：處理器、存儲器和總線，其中，

所述處理器和所述存儲器通過所述總線完成相互間的通信；

所述存儲器存儲有可被所述處理器執行的程序指令，所述處理器調用所述程序指令能夠執行如下方法：

接收多源海量數據，并調取數據接收服務解析所述多源海量數據；所述多源海量數據是根據預先配置的任務所產生的開源數據；

若接收到外界選擇的預設模型的確認動作，將解析后的多源海量數據輸入所述預設模型，以供分析所述預設模型的輸出結果。

第四方面，本發明實施例提供一種非暫態計算機可讀存儲介質，包括：

所述非暫態計算機可讀存儲介質存儲計算機指令，所述計算機指令使所述計算機執行如下方法：

接收多源海量數據，并調取數據接收服務解析所述多源海量數據；所述多源海量數據是根據預先配置的任務所產生的開源數據；

若接收到外界選擇的預設模型的確認動作，將解析后的多源海量數據輸入所述預設模型，以供分析所述預設模型的輸出結果。