[發(fā)明專利]基于工作流的數(shù)據(jù)集成系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201610100195.6
• 申請(qǐng)日: 2016-02-23
• 公開（公告）號(hào): CN107103448A
• 公開（公告）日: 2017-08-29
• 發(fā)明（設(shè)計(jì)）人: 余勁文;余哲灝
• 申請(qǐng)（專利權(quán)）人: 上海御行信息技術(shù)有限公司
• 主分類號(hào): G06Q10/10
• 分類號(hào): G06Q10/10;G06Q10/06;G06Q50/20
• 代理公司: 上海申新律師事務(wù)所31272
• 代理人: 夏海天

1.基于工作流的數(shù)據(jù)集成系統(tǒng)，其特征在于，該系統(tǒng)包括同步接口單元、模塊配置單元、發(fā)布同步單元、信息系統(tǒng)單元；

對(duì)數(shù)據(jù)集成，EAI集成架構(gòu)中的點(diǎn)到點(diǎn)架構(gòu)雖然可以很好地將數(shù)據(jù)從一數(shù)據(jù)源轉(zhuǎn)換到另一源，但是每種點(diǎn)到點(diǎn)的構(gòu)架方法都只是一種特例化的方法，而當(dāng)數(shù)據(jù)源數(shù)目巨大時(shí)，很難以支持新的數(shù)據(jù)源加入，而ETL指的是從異構(gòu)的數(shù)據(jù)源抽取數(shù)據(jù)并進(jìn)行轉(zhuǎn)換最后裝載到數(shù)據(jù)倉(cāng)庫，針對(duì)ETL概念，Vassiliadis等人提出了一種過程模型，該ETL過程模型從不同的數(shù)據(jù)源抽取數(shù)據(jù)然后經(jīng)過轉(zhuǎn)換最終裝載入目標(biāo)數(shù)據(jù)庫中，相對(duì)于數(shù)據(jù)倉(cāng)庫而言，數(shù)據(jù)集成領(lǐng)域的ETL有其自身的一些特點(diǎn)，如數(shù)據(jù)差異性更大，不僅是結(jié)構(gòu)化的數(shù)據(jù)，可能還涉及到半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)；同時(shí)數(shù)據(jù)抽取，轉(zhuǎn)換和加載等操作往往在不同的地方，需要遠(yuǎn)距離傳輸，考慮到性能需求需要盡量減小網(wǎng)絡(luò)開銷，因此，可以通過對(duì)ETL的擴(kuò)展和修改以解決金融領(lǐng)域數(shù)據(jù)集成的問題；

經(jīng)過總體架構(gòu)設(shè)計(jì)、集成開發(fā)、部署運(yùn)行直至項(xiàng)目圓滿完成的一個(gè)流程，此流程作為實(shí)施人員進(jìn)行高校數(shù)據(jù)集成時(shí)的指導(dǎo)，具體步驟是：

(1)搜集數(shù)據(jù)集成需求，并進(jìn)行需求分析，整理成需求文檔，以便成為項(xiàng)目實(shí)施的基礎(chǔ)，因此需求分析是整個(gè)數(shù)據(jù)集成項(xiàng)目的關(guān)鍵；

(2)確定數(shù)據(jù)集成總體框架，對(duì)整理出的需求，構(gòu)建數(shù)據(jù)集成的總體架構(gòu)，以集成中心庫為中心，實(shí)現(xiàn)與各業(yè)務(wù)系統(tǒng)數(shù)據(jù)的交互；

(3)數(shù)據(jù)集成平臺(tái)的安裝：包括集成工具的安裝，數(shù)據(jù)庫的安裝；

(4)集成開發(fā)：根據(jù)需求和總體架構(gòu)，利用集成工具，實(shí)施數(shù)據(jù)集成中實(shí)際業(yè)務(wù)需求的項(xiàng)目設(shè)計(jì)；

(5)部署運(yùn)行：將實(shí)施完成的項(xiàng)目部署到服務(wù)器上，并進(jìn)行相應(yīng)的配置：

信息系統(tǒng)單元包含有公文交換總控模塊、公文信息緩存及備份模塊、公文流轉(zhuǎn)子系統(tǒng)：

公文交換總控模塊為各公文流轉(zhuǎn)子系統(tǒng)提供了交換請(qǐng)求接口，一旦交換中心接受到交換請(qǐng)求后，便根據(jù)請(qǐng)求的實(shí)際配置情況，主動(dòng)抓取需要交換的公文數(shù)據(jù)進(jìn)行區(qū)層面的保存及整理，隨后再將必要的數(shù)據(jù)主動(dòng)推送到目標(biāo)部門服務(wù)器，如果目標(biāo)部門尚未配備公文服務(wù)器，則自動(dòng)推送到區(qū)公用公文流 轉(zhuǎn)子系統(tǒng)中，同時(shí)，交換中心還將適當(dāng)?shù)挠|發(fā)各類消息提醒機(jī)制，主動(dòng)提醒相關(guān)人員進(jìn)行及時(shí)處理；

公文信息緩存及備份模塊該模塊將通過一定的效驗(yàn)機(jī)制，緩存已經(jīng)交換過的公文格式、工作流程等方面的信息，從軟件設(shè)計(jì)上避免相關(guān)部門每次都交換此類信息而造成的性能低下等情況的發(fā)生，同時(shí)，還將對(duì)已交換數(shù)據(jù)做統(tǒng)一的備份和整理，保證某一部門的故障不會(huì)影響到其他部門系統(tǒng)的正常使用，保證工作的連續(xù)性。

2.根據(jù)權(quán)利要求1所述的基于工作流的數(shù)據(jù)集成系統(tǒng)，其特征在于，同步接口單元包括了字段的轉(zhuǎn)換、清洗、拼接等方式，在一個(gè)數(shù)據(jù)集成任務(wù)中，Oracle Data Integrator的聲明設(shè)計(jì)是在稱為“接口(interface)”的里面使用關(guān)系圖(relational paradigm)的形式去聲明這些規(guī)則的，數(shù)據(jù)源就人員基本信息表，目標(biāo)就是教務(wù)系統(tǒng)系統(tǒng)，轉(zhuǎn)換就是基本信息表和單位表單之間的連接，以及每個(gè)單位的信息聚合，采用聲明設(shè)計(jì)，我們只需要把重點(diǎn)放在真正需要關(guān)心的地方，那就是信息系統(tǒng)的集成任務(wù)的規(guī)則，而不是集成過程的底層技術(shù)方面。