[發明專利]一種企業異構數據庫智能集成的系統及方法

在審

• 申請號: 201611209341.5
• 申請日: 2016-12-23
• 公開（公告）號: CN106844485A
• 公開（公告）日: 2017-06-13
• 發明（設計）人: 林殷;吳方才;朱雪松
• 申請（專利權）人: 航天星圖科技（北京）有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京安博達知識產權代理有限公司11271
• 代理人: 徐國文

1.一種企業異構數據庫智能集成的系統，包括：數據倉庫、集成數據層和應用接口；其特征在于：

底層的各個異構數據源構成了系統的數據倉庫；

集成數據層封裝了異構數據庫集成系統的業務邏輯；

各種應用程序和對應的訪問接口構成了系統的應用接口；

集成數據層是實現異構數據庫中數據轉換的核心，目的是訪問各個數據源，集成數據源信息，協調各數據源間信息；集成數據層在各局部數據提供的共享數據的基礎之上建立一個全局的虛擬視圖，并不存儲實際的數據；具體包括:元數據DB、元數據管理器、綜合包裝器、中介器、應用層訪問統一接口、異構數據庫統一接口；

元數據DB用于儲存各異構數據庫的元數據庫信息；

元數據管理器用于制定集成系統的全局模式與局部數據庫的模式之間的轉換規則；

中介器用于異構數據庫的注冊、公共模型的生成和全局查詢請求的接收；其中，中介器由三個組件構成，包括：異構數據注冊模塊、查詢規劃模塊和結果合并過濾模塊；異構數據注冊模塊的主要功能是：在共享數據注冊階段，負責公共模型的建立以及異構數據庫的共享注冊；查詢規劃模塊的主要功能是：在數據集成階段，將客戶端提交的基于全局數據庫的標準查詢分解成針對各個異構數據庫的子查詢，并提交到相應的包裝器；結果合并過濾模塊的主要功能是：將各異構數據庫查詢返回的XML文檔進行合并，形成完整統一的查詢結果，反饋至客戶端瀏覽器；

綜合包裝器用于實現數據位置和訪問的透明，對異構的數據進行包裝；綜合包裝器由智能更新模塊、查詢結果轉換模塊和數據庫操作模塊三個組件構成；智能更新模塊采用spring框架的quartz任務定時的掃描由不同的異構數據庫上傳的XML描述文檔，通過解析這些XML文檔，實現數據自動更新；查詢結果轉換模塊負責將SQL查詢的結果轉換為XML文檔；數據庫操作模塊負責連接后臺各個異構數據庫，包括初始化數據庫連接、分配連接、封裝數據庫基本操作、關閉連接的功能；

集成數據層對外提供了兩個統一接口，即應用層訪問統一接口和底層異構數據庫訪問接口；其功能是屏蔽各數據庫的差異，提供數據的透明訪問，使得使用者無需知道數據的數據源模式及具體的物理位置等信息，只需通過系統定義的與具體數據源無關的SQL語句進行訪問。

2.根據權利要求1所述的系統，該系統采用B/S模式，構成了客戶/服務器三層架構。

3.根據權利要求1所述的系統，集成數據層采用中間件技術。

4.根據權利要求1所述的系統，所述元數據庫信息包括注冊信息、連接信息URL、各元數據庫用戶與全局用戶的匹配關系、模式映射信息、訪問策略信息，元數據DB支撐整個系統的運行。

5.一種企業異構數據庫智能集成的方法，該方法應用包括數據倉庫、集成數據層和應用接口的系統；其特征在于：

底層的各個異構數據源構成了系統的數據倉庫；集成數據層封裝了異構數據庫集成系統的業務邏輯；各種應用程序和對應的訪問接口構成了系統的應用接口；集成數據層是實現異構數據庫中數據轉換的核心，目的是訪問各個數據源，集成數據源信息，協調各數據源間信息；集成數據層在各局部數據提供的共享數據的基礎之上建立一個全局的虛擬視圖，并不存儲實際的數據；具體包括:元數據DB、元數據管理器、綜合包裝器、中介器、應用層訪問統一接口、異構數據庫統一接口；元數據DB用于儲存各異構數據庫的元數據庫信息；

元數據管理器用于制定集成系統的全局模式與局部數據庫的模式之間的轉換規則；中介器用于異構數據庫的注冊、公共模型的生成和全局查詢請求的接收；其中，中介器由三個組件構成，包括：異構數據注冊模塊、查詢規劃模塊和結果合并過濾模塊；異構數據注冊模塊的主要功能是：在共享數據注冊階段，負責公共模型的建立以及異構數據庫的共享注冊；查詢規劃模塊的主要功能是：在數據集成階段，將客戶端提交的基于全局數據庫的標準查詢分解成針對各個異構數據庫的子查詢，并提交到相應的包裝器；結果合并過濾模塊的主要功能是：將各異構數據庫查詢返回的XML文檔進行合并，形成完整統一的查詢結果，反饋至客戶端瀏覽器；綜合包裝器用于實現數據位置和訪問的透明，對異構的數據進行包裝；綜合包裝器由智能更新模塊、查詢結果轉換模塊和數據庫操作模塊三個組件構成；智能更新模塊采用spring框架的quartz任務定時的掃描由不同的異構數據庫上傳的XML描述文檔，通過解析這些XML文檔，實現數據自動更新；查詢結果轉換模塊負責將SQL查詢的結果轉換為XML文檔；數據庫操作模塊負責連接后臺各個異構數據庫，包括初始化數據庫連接、分配連接、封裝數據庫基本操作、關閉連接的功能；

集成數據層對外提供了兩個統一接口，即應用層訪問統一接口和底層異構數據庫訪問接口；其功能是屏蔽各數據庫的差異，提供數據的透明訪問，使得使用者無需知道數據的數據源模式及具體的物理位置等信息，只需通過系統定義的與具體數據源無關的SQL語句進行訪問；

在數據注冊階段，由中介器中的注冊管理器來完成，主要任務是完成對各異構數據源在集成數據層中的注冊，選擇集成的內容(共享的表和字段)和訪問的權限，并建立數據庫集成的模型，登錄數據集成系統，選擇數據庫中共享的內容，對共享的數據的訪問權限進行設定，選擇自己欲注冊的數據庫類型，向集成系統管理員注冊信息，如數據庫主機名、IP地址、用戶名、密碼；由數據集成系統管理員審核各注冊的異構數據源，確定訪問權限和集成內容。由集成數據層建立共享的公共模型，并收集各注冊的數據庫信息；

在系統運行階段，接受用戶提出的查詢請求并對請求做出相應的解答。