[發明專利]一種面向海量異構多維數據采集的質量大數據系統

有效

• 申請號: 202110051318.2
• 申請日: 2021-01-15
• 公開（公告）號: CN112380224B
• 公開（公告）日: 2021-05-18
• 發明（設計）人: 金震;王兆君;李明;曹朝輝
• 申請（專利權）人: 北京三維天地科技股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/215;G06F16/25;G06F16/2458;G06F16/26
• 代理公司: 北京冠和權律師事務所 11399
• 代理人: 朱健

本發明提供了一種面向海量異構多維數據采集的質量大數據系統，包括：海量異構數據采集模塊，對海量異構質量數據進行采集；質量數據治理模塊，對海量異構質量數據進行治理；質量數據存儲模塊，存儲海量異構質量數據；質量數據智能診斷分析模塊，對海量異構質量數據進行數據智能診斷分析；質量數據多維動態感知模塊，將海量異構質量數據進行可視化展示；質量數據專項數據應用模塊，基于可視化展示結果提取專項數據，并面向使用者進行數據服務。將采集到的異構多維數據進行治理，并進行診斷分析，解決了因人為經驗造成質量數據分析預測結果不準確的弊端，提高用戶對質量數據分析的準確度，便于為質量控制與管理的相關業務提供準確的分析。

技術領域

本發明涉及數據處理技術領域，特別涉及一種面向海量異構多維數據采集的質量大數據系統。

背景技術

目前，通過多維異構數據的采集技術，進行質量數據的大數據分析問題，為質量控制與管理的相關業務提供預測分析，并且從市場業務的角度進行數據的分析和業務的預測，可以做到市場的預測、銷量的預測、產品運行狀態的預測。

但目前大多是基于企業的角度進行分析，在決策的過程中，由于采集的數據不全面，且采用大量的人為判斷，導致分析結果不準確。

因此本發明提供了一種面向海量異構多維數據采集的質量大數據系統。

發明內容

本發明提供一種一種面向海量異構多維數據采集的質量大數據系統，用以解決采集的數據不全面，憑借人為經驗對質量數據分析不準確的問題，從而提高對質量數據分析預測的準確度，為質量控制與管理的相關業務提供準確的分析。

本發明提供了一種面向海量異構多維數據采集的質量大數據系統，包括：

海量異構多維數據采集模塊，用于對海量異構質量數據進行采集；

質量數據治理模塊，用于對采集的海量異構質量數據進行數據治理；

超大規模質量數據存儲模塊，用于存儲數據治理后的海量異構質量數據；

質量數據智能診斷分析模塊，用于通過多種數據模型對數據治理后的海量異構質量數據進行數據智能診斷分析；

質量數據多維動態感知模塊，用于根據數據智能診斷結果，將數據治理后的海量異構質量數據進行可視化展示；

質量數據專項數據應用模塊，用于基于可視化展示結果提取專項數據，并面向使用者進行數據服務。

優選的，所述的質量大數據系統，包括：

采集到的所述異構質量數據包括：電商平臺質量數據、電商平臺營銷數據、質檢機構質量檢驗檢測數據、質量監督抽查數據、生產廠家出廠備案數據、質量投拆舉報數據、質量輿情監測數據。

優選的，所述的質量大數據系統，所述質量數據治理模塊包括：

數據拆解單元，用于將所述海量異構質量數據中的復雜信息進行智能拆解；

數據處理單元，用于根據預設的數據關聯、智能匹配方法對拆解后的復雜信息進行標準化；

數據清洗單元，用于將標準化后的復雜信息進行清洗。

優選的，所述的質量大數據系統，所述質量數據存儲模塊包括：

數據查詢單元，用于通過預設的存儲查詢方法對待存儲的所述海量異構質量數據進行定位，查詢需要的目標異構質量數據；

數據接入單元，用于通過預設的高壓縮比技術，將查詢到的所述目標異構質量數據進行數據接入。

優選的，所述的質量大數據系統，還包括：