[發明專利]一種模型驅動的數據集成中間件及實現方法

在審

• 申請號: 202010145552.7
• 申請日: 2020-03-03
• 公開（公告）號: CN111400382A
• 公開（公告）日: 2020-07-10
• 發明（設計）人: 陳練兵;陳錫琦
• 申請（專利權）人: 湖南長信暢中科技股份有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/2455;G06F9/54
• 代理公司: 北京聯瑞聯豐知識產權代理事務所(普通合伙) 11411
• 代理人: 黃冠華

本發明公開了一種模型驅動的數據集成中間件及實現方法，包括信息模型管理模塊、存儲模型管理模塊、異源異構數據集成模塊和通用交換服務管理模塊；信息模型管理模塊，用于值域代碼管理、數據元管理和數據集管理；存儲模型管理模塊，用于數據源管理、主題庫管理和存儲模型管理；異源異構數據集成模塊，用于實現兩種集成模式，定時集成和實時集成等；本發明實現數據集成過程中標準規范管理、模型建立、數據中心建立、接口規范管理、數據存儲、共享與交換服務接口一體化管理，定義信息模型、存儲模型、以及交換模型等模型，通過模型驅動整個數據集成過程的自動化、工具化實現，降低系統升級更新成本、提高系統靈活擴展性。

技術領域

本發明涉及數據集成技術領域，更為具體地，涉及一種模型驅動的數據集成中間件及實現方法。

背景技術

加強各部門、各系統數據共享與互聯互通，實現“讓數據多跑路、讓群眾少跑腿”是目前各個行業信息化建設的重要目標，而數據集成是實現這一目標的重要環節，數據集成涉及數據整合與交換的標準建立，異源異構數據標準化處理，數據中心模型建立、數據存儲規則管理、數據交換標準及服務生成等內容和多個技術處理環節。傳統的數據集成方法往往由多個離散的工具分別實現某一部分，無法實現一體化管理，在體系化、自動化、標準化管理方面存在諸多不足，主要包括以下方面：

(1)數據集成標準未實現結構化管理。數據集成的標準可能隨著行業的發展，業務的需求發生變化。傳統的數據集成方法對數據集成標準的管理一般是通過非結構化文檔實現，每個版本的升級需要人工對非結構化文檔進行維護，再借助其他工具升級到數據中心。過程繁瑣，無法實現對多個版本的支持，系統更新升級成本較高。

(2)數據集成接口規范無法通過系統自動生成。數據集成需要向被集成的系統提供集成的接口規范文檔，傳統的做法需要人工進行維護，經常容易出現接口規范與具體的接口實現不一致的情況，維護成本較高，效果不夠理想。

(3)數據存儲模型未在數據集成系統中管理。傳統的數據集成方法一般未定義存儲模型的概念，數據庫結構一般基于數據交換標準使用第三方數據庫建模工具完成。由于數據集成中間件未保存數據庫元數據信息，使得數據集成和交換需要硬編碼完成，無法通過配置方式實現。

(4)數據存儲規則未實現程序配置化管理。從數據集成標準到數據中心表的創建需要借助第三方建模工具完成，數據集成中間件未能保存數據庫元數據信息，數據存儲規則、加密規則一般通過硬編碼完成，或另外開發配置管理系統實現。

(5)數據交換接口無法動態生成。傳統的數據集成中間件一般是根據需求采用硬編碼方式實現，升級更新成本高，靈活擴展性不夠。

(6)數據交換標準無法通過配置方式實現多種格式的適配。數據集成過程中往往涉及對多種數據交換標準的適配，傳統的做法一般都是通過硬編碼方式實現，升級更新成本高，靈活擴展性不夠。

發明內容

本發明的目的在于克服現有技術的不足，提供一種模型驅動的數據集成中間件及實現方法，實現數據集成過程中標準規范管理、模型建立、數據中心建立、接口規范管理、數據存儲、共享與交換服務接口一體化管理，定義信息模型、存儲模型、以及交換模型等模型，通過模型驅動整個數據集成過程的自動化、工具化實現，降低系統升級更新成本、提高系統靈活擴展性。

本發明的目的是通過以下技術方案來實現的：

一種模型驅動的數據集成中間件，包括信息模型管理模塊、存儲模型管理模塊、異源異構數據集成模塊和通用交換服務管理模塊；信息模型管理模塊，用于值域代碼管理、數據元管理和數據集管理；存儲模型管理模塊，用于數據源管理、主題庫管理和存儲模型管理；異源異構數據集成模塊，用于實現兩種集成模式，定時集成和實時集成；通用交換服務管理模塊，用于以信息模型、存儲模型為基礎，抽象平臺中間存儲對象，采用鍵值對方式對傳輸的數據進行存儲，根據需要存儲和交換的數據集按存儲模型結構生成通用的新增、修改、刪除以及查詢服務。