[發(fā)明專利]一種基于有向圖結(jié)構(gòu)的數(shù)據(jù)集成方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201910090079.4
• 申請(qǐng)日: 2019-01-18
• 公開(kāi)（公告）號(hào): CN109828972B
• 公開(kāi)（公告）日: 2022-03-22
• 發(fā)明（設(shè)計(jì)）人: 劉基陽(yáng)
• 申請(qǐng)（專利權(quán)）人: 深圳易嘉恩科技有限公司
• 主分類號(hào): G06F16/22
• 分類號(hào): G06F16/22;G06F16/25
• 代理公司: 四川省成都市天策商標(biāo)專利事務(wù)所(有限合伙) 51213
• 代理人: 吳瑞芳

1.一種基于有向圖結(jié)構(gòu)的數(shù)據(jù)集成方法，其特征在于，包括適配器、融合器、分析器和集成引擎解析器，還包括以下步驟：

S1、適配器找出數(shù)據(jù)源注冊(cè)信息且連接各異構(gòu)數(shù)據(jù)源，并通過(guò)各異構(gòu)數(shù)據(jù)源的元數(shù)據(jù)庫(kù)獲得描述各異構(gòu)數(shù)據(jù)的數(shù)據(jù)源模式，通過(guò)圖形結(jié)構(gòu)將數(shù)據(jù)源模式進(jìn)行模式轉(zhuǎn)換，轉(zhuǎn)換為公共模式集，消除模式表示沖突，數(shù)據(jù)源模式包括數(shù)據(jù)庫(kù)名、表名、字段名、數(shù)據(jù)類型和主外鍵；

S2、通過(guò)適配器獲得的數(shù)據(jù)源模式信息按模式轉(zhuǎn)換規(guī)則以及轉(zhuǎn)換流程轉(zhuǎn)換為模式圖上對(duì)應(yīng)的節(jié)點(diǎn)，模式圖包括第一層節(jié)點(diǎn)、第二層節(jié)點(diǎn)、第三層節(jié)點(diǎn)和第四層節(jié)點(diǎn)，將數(shù)據(jù)庫(kù)名映射為無(wú)入度的第一層節(jié)點(diǎn)，將各數(shù)據(jù)表名映射為入度為1的第二層節(jié)點(diǎn)，將表中各字段名映射為入度出度都等于1的第三層節(jié)點(diǎn)，將各字段的數(shù)據(jù)類型映射為無(wú)出度的第四層節(jié)點(diǎn)，各相同信息映射為相同節(jié)點(diǎn)，形成對(duì)應(yīng)于數(shù)據(jù)源模式的模式圖集合，并按需要進(jìn)行調(diào)整，將在適配器中形成的模式圖描述的數(shù)據(jù)源模式通過(guò)接口與數(shù)據(jù)集成引擎中的融合器通信；

S3、在分析器中對(duì)模式圖集的各個(gè)元素進(jìn)行對(duì)比，發(fā)現(xiàn)結(jié)構(gòu)和語(yǔ)義沖突并按預(yù)定義的模式圖操作完成相應(yīng)操作，即消除各模式間的結(jié)構(gòu)沖突，形成完整、統(tǒng)一、無(wú)沖突的全局模式，將相應(yīng)的操作更改為映射規(guī)則，對(duì)節(jié)點(diǎn)集和邊集進(jìn)行操作，操作包括針對(duì)單個(gè)模式圖中節(jié)點(diǎn)值的修改、刪除節(jié)點(diǎn)及與之關(guān)聯(lián)的邊集、增加對(duì)應(yīng)邊集的節(jié)點(diǎn)、修改對(duì)應(yīng)的節(jié)點(diǎn)、增加邊集以及針對(duì)模式圖節(jié)點(diǎn)之間的合并、替換、節(jié)點(diǎn)的嫁接操作，單個(gè)模式圖中的節(jié)點(diǎn)合并表示將數(shù)據(jù)源中存在合并等價(jià)關(guān)系的數(shù)據(jù)映射為模式圖上同一節(jié)點(diǎn)，可消除單個(gè)數(shù)據(jù)源數(shù)據(jù)的沖突，模式圖間節(jié)點(diǎn)的合并與嫁接操作代表數(shù)據(jù)源間存在等價(jià)關(guān)系的數(shù)據(jù)映射為模式圖中同一節(jié)點(diǎn)，用于消除數(shù)據(jù)源間的數(shù)據(jù)沖突；

S4、將全局模式作為數(shù)據(jù)中心的數(shù)據(jù)模式，將數(shù)據(jù)源的數(shù)據(jù)按照全局模式與映射規(guī)則集的約束遷移到數(shù)據(jù)中心，完成數(shù)據(jù)的集成。

2.根據(jù)權(quán)利要求1所述的一種基于有向圖結(jié)構(gòu)的數(shù)據(jù)集成方法，其特征在于，所述步驟S4中的映射規(guī)則集是在集成過(guò)程中自動(dòng)對(duì)比生成，主要記錄模式圖操作所做的各種更改，包括對(duì)單個(gè)模式圖節(jié)點(diǎn)及邊集的操作以及模式圖間對(duì)節(jié)點(diǎn)集以及邊集的操作，據(jù)此映射規(guī)則，可以保持?jǐn)?shù)據(jù)源局部模式以及全局模式的相互映射，保持兩者的獨(dú)立性。

3.根據(jù)權(quán)利要求1所述的一種基于有向圖結(jié)構(gòu)的數(shù)據(jù)集成方法，其特征在于，所述步驟S2還包括以下步驟：

S201、查找注冊(cè)信息；

S202、連接數(shù)據(jù)源；

S203、獲取元數(shù)據(jù)集；

S204、若元數(shù)據(jù)集的數(shù)據(jù)庫(kù)名集合為空，則斷開(kāi)連接，結(jié)束操作否則進(jìn)行下一步驟；

S205、將數(shù)據(jù)庫(kù)名映射為模式圖的第一層節(jié)點(diǎn)；

S206、表名集合為空則返回步驟S204，否為進(jìn)行下一步；

S207、獲取集合元素對(duì)應(yīng)的表名元數(shù)據(jù)集；

S208、表名映射為模式圖的第二層節(jié)點(diǎn)；

S209、字段合集為空，則返回步驟S206，否則進(jìn)行下一步；

S210、獲取集合元素對(duì)應(yīng)的字段名元數(shù)據(jù)集；

S211、字段映射為模式圖第三層節(jié)點(diǎn)；

S212、獲取字段類型及其約束條件；

S213、映射為模式圖第四層節(jié)點(diǎn)；

S214、添加到模式圖集合，進(jìn)行步驟S206。