[發(fā)明專利]電力全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)分析域數(shù)據(jù)比對工具

在審

• 申請?zhí)枺?/td>: 201711351824.3
• 申請日: 2017-12-15
• 公開（公告）號: CN108228740A
• 公開（公告）日: 2018-06-29
• 發(fā)明（設(shè)計）人: 張廣德;張譯;于連城;魏海剛;王雪群;雷曉萍;徐欣杰;吳彬;宮旭;郁文龍;李蕊娟
• 申請（專利權(quán)）人: 國網(wǎng)青海省電力公司信息通信公司;國網(wǎng)信通億力科技有限責(zé)任公司;國家電網(wǎng)公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 福州智理專利代理有限公司 35208
• 代理人: 康永輝

本發(fā)明涉及電力全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)分析域數(shù)據(jù)比對工具,所述電力全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)分析域數(shù)據(jù)比對工具包括：(1)基于數(shù)據(jù)比對工具實現(xiàn)對數(shù)據(jù)庫連接管理；(2)基于數(shù)據(jù)比對工具實現(xiàn)數(shù)據(jù)類型配置管理；(3)基于數(shù)據(jù)比對工具實現(xiàn)比較組管理；(4)基于數(shù)據(jù)比對工具實現(xiàn)比較任務(wù)管理。

技術(shù)領(lǐng)域

本發(fā)明涉及一種電力全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)分析域數(shù)據(jù)比對工具。

背景技術(shù)

隨著國家電網(wǎng)公司各業(yè)務(wù)信息系統(tǒng)建設(shè)和應(yīng)用的不斷深入，信息系統(tǒng)所產(chǎn)生的數(shù)據(jù)已成為國家電網(wǎng)公司重要資產(chǎn)，經(jīng)營管理和業(yè)務(wù)模式創(chuàng)新對數(shù)據(jù)資源深度應(yīng)用也提出了新的要求。因此，解決“跨專業(yè)業(yè)務(wù)協(xié)同與信息共享不足，數(shù)據(jù)多頭輸入，數(shù)據(jù)準(zhǔn)確性、實時性不強，數(shù)據(jù)反復(fù)抽取、冗余存儲、質(zhì)量不高”等問題是關(guān)鍵所在。為徹底解決當(dāng)前數(shù)據(jù)中心存在的不足，滿足現(xiàn)有數(shù)據(jù)應(yīng)用需求，國家電網(wǎng)公司啟動了全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心建設(shè)，而隨著全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心的建設(shè)與應(yīng)用不斷深入,全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心在數(shù)據(jù)核查工作過程中，存在源業(yè)務(wù)系統(tǒng)數(shù)據(jù)繁多、數(shù)據(jù)量大、人工核查方式困難、工作任務(wù)繁重、核查周期長等問題，數(shù)據(jù)的一致性、準(zhǔn)確性、完整性無法及時進行準(zhǔn)確的核查。

基于全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)接入現(xiàn)狀，面對海量數(shù)據(jù)的一致性核查工作，從源端系統(tǒng)性能、網(wǎng)絡(luò)資源耗費狀態(tài)、增量數(shù)據(jù)存儲容量多方面展開調(diào)研分析，為保證數(shù)據(jù)一致性、完整性，業(yè)務(wù)邏輯性、有效性，需要開發(fā)適應(yīng)性工具進行數(shù)據(jù)質(zhì)量核查工作，有必要建設(shè)數(shù)據(jù)比對工具解決以上問題。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種電力全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)分析域數(shù)據(jù)比對工具。本發(fā)明的技術(shù)方案如下：

所述電力全業(yè)務(wù)統(tǒng)一數(shù)據(jù)中心數(shù)據(jù)分析域數(shù)據(jù)比對工具，包括：

(1) 基于數(shù)據(jù)比對工具實現(xiàn)比對對象數(shù)據(jù)連接管理

比對對象數(shù)據(jù)連接即目標(biāo)端、源端數(shù)據(jù)庫連接信息，數(shù)據(jù)連接管理實現(xiàn)了各類連接的統(tǒng)一記錄、快速查找、獲取和使用，為數(shù)據(jù)比對提供基礎(chǔ)對象連接支持。主要實現(xiàn)不同類型數(shù)據(jù)庫連接信息保存，連接測試，數(shù)據(jù)表結(jié)構(gòu)查看，表信息同步功能。

(2) 基于數(shù)據(jù)比對工具實現(xiàn)數(shù)據(jù)類型配置

數(shù)據(jù)類型配置實現(xiàn)了外部數(shù)據(jù)類型對應(yīng)到本地數(shù)據(jù)類型的映射配置。通過此模塊的配置，可以實現(xiàn)比對工具處理數(shù)據(jù)類型、數(shù)據(jù)長度等的有效管理，將不同的外部數(shù)據(jù)庫類型映射為本地數(shù)據(jù)庫相同類型，避免了數(shù)據(jù)差異化帶來的一系列問題。實現(xiàn)了核查對象類型的個性化、配置化功能，既可以實現(xiàn)對某種類型字段的比對，又可以過濾掉大文本、二進制等超大字段類型，從而可提供輕量高效的比對，為用戶提供更多的選擇。

(3) 基于數(shù)據(jù)比對工具實現(xiàn)比較組管理

通過比較組的管理，實現(xiàn)比對規(guī)則的設(shè)置。包括比較組管理，設(shè)置源端、目標(biāo)端連接信息。添加比較對：選擇源端、目標(biāo)端的表結(jié)構(gòu)信息，提供自動匹配和手工匹配兩種模式。列匹配信息：選擇添加需要比對的列，提供一鍵自動匹配相同列。條件匹配信息：選擇數(shù)據(jù)列，設(shè)置條件值，實現(xiàn)比對數(shù)據(jù)范圍的界定。

(4) 基于數(shù)據(jù)比對工具實現(xiàn)比對任務(wù)管理

比對任務(wù)管理功能主要實現(xiàn)對比任務(wù)按照對比表結(jié)構(gòu)對比、結(jié)果查詢及導(dǎo)出，按記錄數(shù)對比、結(jié)果查詢及導(dǎo)出，按明細(xì)對比、結(jié)果查詢和導(dǎo)出。對比表結(jié)構(gòu)功能：按照比較組設(shè)置的比較規(guī)則，對源端、目標(biāo)端指定的表進行結(jié)構(gòu)一致性比對，從字段名稱、數(shù)量、字段類型、長度等方面進行比對，將不一致的表逐一統(tǒng)計列舉出來，并實現(xiàn)源端、目標(biāo)端相同表名結(jié)構(gòu)不一致性直接比較顯示，對比結(jié)果提供導(dǎo)出。比對記錄數(shù)：根據(jù)設(shè)置的比較組中的比較規(guī)則，對源端、目標(biāo)端相關(guān)數(shù)據(jù)表數(shù)據(jù)量進行比對，并統(tǒng)計生成比對結(jié)果，提供結(jié)果導(dǎo)出。對比明細(xì)：根據(jù)設(shè)置的比較組中的比較規(guī)則，對源端、目標(biāo)端相關(guān)數(shù)據(jù)表明細(xì)數(shù)據(jù)進行比對，并統(tǒng)計生成比對結(jié)果，提供差異明細(xì)數(shù)據(jù)查看，精確到行級、字段級。提供比對統(tǒng)計結(jié)果導(dǎo)出。