[發明專利]一種基于多源異構大數據融合的云服務平臺設計方法

在審

• 申請號: 202110303639.7
• 申請日: 2021-03-22
• 公開（公告）號: CN113051249A
• 公開（公告）日: 2021-06-29
• 發明（設計）人: 田亞麗;吳茂傳;王躍;王雷;張磊;李剛;沃清荷;林晨;田野;董奇;王夢
• 申請（專利權）人: 江蘇杰瑞信息科技有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21;G06F16/242;G06F16/2458;G06F16/25;G06F16/28
• 代理公司: 連云港潤知專利代理事務所 32255
• 代理人: 劉喜蓮;馬強

一種基于多源異構大數據融合的云服務平臺設計方法，該方法包括面向行業應用的多源異構大數據集成框架構建、基于模糊D?S證據理論的多源異構大數據融合模型與算法研究、基于多源異構大數據融合的云服務平臺開發與應用，能夠進行多源異構大數據的實時處理，提高性能，為相關企業和機構服務，提高數據的有效利用率。該方法為面向智慧物流、智能制造、智慧醫療等行業開發的基于多源異構大數據融合的云服務平臺，將促進相關行業企業或機構日常運營決策的自動化、信息化、以及科學化，同時展開應用示范。

技術領域

本發明涉及云服務平臺設計技術領域，特別是一種基于多源異構大數據融合的云服務平臺設計方法。

背景技術

隨著全球經濟、科技的不斷融合，日益激烈的市場經濟競爭對現代制造業和服務業提出了更高的要求，產品功能、質量、服務的高標準嚴要求也對信息數據的處理方式和效率提出了更高要求；并且，隨著計算機網絡技術、通信技術、信號檢測等技術快速發展，人們對于數據內容的豐富度、準確性、實時性等方面的要求已經及無法由單一數據來源的信息所滿足，特別是在現代智能制造、智慧物流、智慧醫療等領域，都需要多源異構大數據融合技術。

當前國內外對多源異構數據融合相關問題的研究已較豐富，但應在多源異構大數據的實時處理、面向行業應用的多源異構大數據集成框架及云服務平臺的研究還存在一些不足，亟待進一步完善，主要體現在：

第一，多源異構大數據的實時處理還存在困難；物流、制造、醫療衛生等行業數據文件具有多源、異構、海量、動態等特點，考慮實時性需求，設計多源異構大數據實時處理模型存在一定難度；

第二，D-S理論中基本概率分配函數存在獲取難的問題；

第三，面向行業應用的多源異構大數據集成框架與云服務平臺還比較少。

發明內容

本發明所要解決的技術問題是針對現有技術的不足，提供一種擁有開發基于多源異構大數據融合的云服務平臺，能夠有效將促進相關行業企業或機構日常運營決策的自動化、信息化、以及科學化的的基于多源異構大數據融合的云服務平臺設計方法。

本發明所要解決的技術問題是通過以下的技術方案來實現的。本發明是一種基于多源異構大數據融合的云服務平臺設計方法，該方法包括

（1）構建面向行業應用的多源異構大數據集成框架

設計多源異構大數據系統，包括數據采集層，數據加工層和數據發布層，數據加工層使用多源異構大數據集成框架，多源異構大數據集成框架是一種基于元數據的異構數據集成框架，該框架通過元數據庫方式建立系統數據全局字典，以全局字典的形式將異構多源異構數據在系統內實現全局、統一的共享，并建立專用的查詢管理模塊對用戶提交的查詢請求進行管理，包括將請求轉化為各數據源可執行的子查詢、查詢結果的整合；

（2）設計基于模糊D-S證據理論的多源異構大數據融合模型與算法

利用經驗、專家知識或概率分布的方式獲得模糊隸屬度函數后作為D-S證據理論的質量函數，設計多源異構數據源的融合結構，并根據多源異構數據源的融合結構設計支持多用戶決策的多源異構數據融合結構模型，然后在此基礎上，設計多源異構大數據融合算法；

（3）設計基于多源異構大數據融合的云服務平臺

（3.1）總體設計

通過數據采集層采集行業基礎數據與日常運營動態數據，數據采集完成后，在數據加工層建立各個源數據庫，用于進行數據的集成，數據加工層基于元數據的異構數據集成框架，元數據庫中儲存了全局信息，系統通過元數據庫管理器對元數據庫進行訪問和管理操作，所有數據源數據庫都通過元數據庫管理器在元數據庫中進行注冊；

數據發布層接收用戶終端發送的服務需求，將需求轉換成為查詢請求，提交到數據加工層，待數據加工層返回封裝好的結果數據后，通過多渠道發送至用戶終端上；

（3.2）異構動態數據源數據抽取和清洗