[發明專利]異構數據資源整合的方法

有效

• 申請號: 201310236607.5
• 申請日: 2013-06-14
• 公開（公告）號: CN103309977B
• 公開（公告）日: 2017-02-08
• 發明（設計）人: 徐立新;顏小林;李軍
• 申請（專利權）人: 廣東電網公司電力科學研究院
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 廣州華進聯合專利商標代理有限公司44224
• 代理人: 王茹,曾旻輝

技術領域

本發明主要在電力報告的自動撰寫的過程中提出了一種異構數據資源整合的方法，在這個基礎上實現了一套完整的解決方案。

背景技術

隨著信息化的推進，像電力企業和政府部門等單位在分析報告撰寫和數據決策分析的需求中，需要集成遠程的一些異構數據作為分析的基礎。然而需要整合的這些數據庫系統各不相同，在存儲方式上存在大量的數據錯誤；存儲信息的數據結構上存在很大的差異；缺乏統一的數據描述標準，這樣一種組織阻礙了單位主體信息化和數字化的進程。因此如何整合這些數據，提供一個統一的數據訪問接口，為管理決策參考和分析報告撰寫提供服務成為迫切要求。

在目前的方法和實現方案中主要是基于C/S結構的數據整合方式，這種方式下需要在用戶機器上安裝客戶端，對用戶機器的要求很高同時客戶端軟件維護難度大；缺乏對工作流程的支持；在電力行業特殊背景需要大系統整合的情況下不支持，導致整合數據和數據使用分離在不同的系統中。

發明內容

基于上面的大的背景下存在的問題，本發明提供了一種數據資源整合的方法，同時在這個方法的基礎上我們實現了一整套解決方案。在B/S構架的基礎上把數據源的定義，數據集的提取，映射關系定義、目的數據源定義和數據加載的流程通過工作流的方式松耦合靈活的解決了資源整合的問題，

數據資源整合的方法，包括步驟：

配置數據源連接，包括數據庫的IP地址，數據庫名稱和訪問權限信息；

配置數據集的維護，包括對需要提取具體的數據表格或具體數據文件的指定；

配置目的數據源，指定需要導入到哪個具體的目的數據庫表中；

配置映射關系，指定數據源中的數據導入到目的數據源的轉化關系；

根據所述映射關系，將所述數據集整合至所述目的數據源。

通過以上方法和實現方案可以看出，數據整合放式的定義方式串聯上整個數據資源的整合流程，一個整合定義，關聯到具體的映射關系，映射關系中需要指定數據的來源和目的數據源，這樣在具體執行中可以以一種工作流的方式異步整合數據。而且通過把數據資源整合的實現集成到數據的使用系統中，這樣無縫的解決了數字鴻溝的問題，也避免了操作的跨系統問題。通過使用證明在電力行業的報告撰寫中提供了很好的支撐，這種方案在其它領域也具有很好的推廣性。

附圖說明

圖1為本發明實施中的異構數據資源整合的整體流程示意圖；

圖2為本發明實施中的數據映射關系定義的功能示意圖；

圖3為數據資源整合的整體結構圖。

具體實施方式

下面結合附圖以及具體的實施例，對本發明的方法和方案實現作進一步的描述。

數據資源整合的方法，包括步驟：

配置數據源連接，包括數據庫的IP地址，數據庫名稱和訪問權限信息；

配置數據集的維護，包括對需要提取具體的數據表格或具體數據文件的指定；

配置目的數據源，指定需要導入到哪個具體的目的數據庫表中；

配置映射關系，指定數據源中的數據導入到目的數據源的轉化關系；

根據所述映射關系，將所述數據集整合至所述目的數據源。

通過以上方法和實現方案可以看出，數據整合放式的定義方式串聯上整個數據資源的整合流程，一個整合定義，關聯到具體的映射關系，映射關系中需要指定數據的來源和目的數據源，這樣在具體執行中可以以一種工作流的方式異步整合數據。而且通過把數據資源整合的實現集成到數據的使用系統中，這樣無縫的解決了數字鴻溝的問題，也避免了操作的跨系統問題。通過使用證明在電力行業的報告撰寫中提供了很好的支撐，這種方案在其它領域也具有很好的推廣性。

參見圖1所示，異構數據資源整合的方法，包括以下過程：

過程一：數據資源整合定義過程

定義一個具體數據整合的任務，在定義中指定整合的名稱、映射關系和執行的調度規則等等信息。數據資源管理整合的模塊通過屬性的綁定形式，將執行過程中的信息關聯起來，可以靈活的搭配具體的信息。

過程二：數據源連接過程

主要是定義和維護需要提取的數據的來源信息。包括數據庫的所在的IP地址、數據庫類型、數據庫名稱、數據庫用戶名和密碼等等信息。通過這種定義方式，可以靈活的切換連接的方式。同時在數據庫連接的實現中加入連接驗證的功能，可以效驗連接的有效性。

過程三：數據集定義

主要是定義需要提取的原數據的數據集合，其定義是建立在數據源連接的基礎上。包括數據集名稱定義，具體提取的數據庫表和數據庫表中列。