[發(fā)明專利]一種設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)質(zhì)量評(píng)測(cè)體系的構(gòu)建方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201710539092.4
• 申請(qǐng)日: 2017-07-04
• 公開（公告）號(hào): CN107368957A
• 公開（公告）日: 2017-11-21
• 發(fā)明（設(shè)計(jì)）人: 鄔蓉蓉;張煒;黎大健;蒲金雨;王樂;張玉波
• 申請(qǐng)（專利權(quán)）人: 廣西電網(wǎng)有限責(zé)任公司電力科學(xué)研究院
• 主分類號(hào): G06Q10/06
• 分類號(hào): G06Q10/06
• 代理公司: 南寧東智知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙)45117
• 代理人: 戴燕桃,巢雄輝

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，尤其涉及一種設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)質(zhì)量評(píng)測(cè)體系的構(gòu)建方法。

背景技術(shù)

在信息時(shí)代以大數(shù)據(jù)為代表的信息技術(shù)正以前所未有的廣度、深度與電網(wǎng)生產(chǎn)運(yùn)行和管理快速融合，發(fā)揮著越來越重要的作用，成為新時(shí)期電網(wǎng)生產(chǎn)管理精益轉(zhuǎn)型的助推器。大數(shù)據(jù)的核心在于對(duì)產(chǎn)生的海量數(shù)據(jù)進(jìn)行挖掘和分析，從而快速地獲取有價(jià)值信息，轉(zhuǎn)化為知識(shí)并進(jìn)行決策和預(yù)判。由于生產(chǎn)數(shù)據(jù)量非常龐大，且分散在各個(gè)信息系統(tǒng)，彼此孤立，未能得到有效整合和共享，數(shù)據(jù)完整性、準(zhǔn)確性、一致性等質(zhì)量問題依然存在。目前數(shù)據(jù)質(zhì)量提升面臨的主要問題有以下幾個(gè)方面：

（1）數(shù)據(jù)來源多：一方面體現(xiàn)在由于信息系統(tǒng)的分散建設(shè)，處理數(shù)據(jù)質(zhì)量的源頭系統(tǒng)多，另一方面體現(xiàn)在同一類數(shù)據(jù)甚至是同一個(gè)屬性，可能來源與不同的系統(tǒng)，由于缺少血緣分析，對(duì)一部分?jǐn)?shù)據(jù)甚至不清楚其源頭是哪里；

（2）質(zhì)量差：包括由于各類字典項(xiàng)不完善導(dǎo)致的產(chǎn)生大量的意義模糊甚至無意義的數(shù)據(jù)，部分出廠交接的數(shù)據(jù)以紙質(zhì)形式存在，舊系統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)因?yàn)闆]有良好的維護(hù)變成無意義的結(jié)構(gòu)化數(shù)據(jù)；

（3）處理慢：當(dāng)前電網(wǎng)公司的生產(chǎn)域信息系統(tǒng)處于從歷史上分散獨(dú)立建設(shè)向一體化建設(shè)的過度階段，因此系統(tǒng)建設(shè)推進(jìn)和歷史數(shù)據(jù)遷移處于主導(dǎo)地位，數(shù)據(jù)質(zhì)量治理工作進(jìn)展稍處于弱勢(shì)的地位而沒有明顯的改善。

因此，針對(duì)業(yè)務(wù)數(shù)據(jù)數(shù)量多、種類龐雜、橫跨專業(yè)多等特點(diǎn)而引起的數(shù)據(jù)質(zhì)量不高的現(xiàn)狀，如何利用現(xiàn)有的數(shù)據(jù)，提高數(shù)據(jù)質(zhì)量，滿足不同企業(yè)的需求是當(dāng)前面臨的一個(gè)重要問題。

發(fā)明內(nèi)容

為克服現(xiàn)有技術(shù)中存在的不足，本發(fā)明提出了一種設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)質(zhì)量評(píng)測(cè)體系的構(gòu)建方法，所述方法的技術(shù)方案為：

一種設(shè)備狀態(tài)監(jiān)測(cè)數(shù)據(jù)質(zhì)量評(píng)測(cè)體系的構(gòu)建方法，包括以下步驟：

S1：分析影響數(shù)據(jù)質(zhì)量的因素以及存在的數(shù)據(jù)質(zhì)量問題；

S2：確定適合所述數(shù)據(jù)質(zhì)量的評(píng)價(jià)維度；

S3：根據(jù)步驟S1、S2的分析結(jié)果，構(gòu)建所述數(shù)據(jù)質(zhì)量的校驗(yàn)規(guī)則；

S4：基于步驟S3所述的校驗(yàn)規(guī)則，構(gòu)建所述數(shù)據(jù)質(zhì)量的評(píng)價(jià)模型。

優(yōu)選的，所述步驟S1中影響數(shù)據(jù)質(zhì)量的因素包括字段、記錄、記錄類型和數(shù)據(jù)源。

優(yōu)選的，所述步驟S2中的評(píng)價(jià)維度包含完整性、唯一性、一致性、合法性、精確性和及時(shí)性。

優(yōu)選的，所述完整性是表征數(shù)據(jù)的完備性維度，包含數(shù)據(jù)的實(shí)體缺失、字段缺失、記錄缺失和字段值缺失；

所述唯一性是表征數(shù)據(jù)的唯一性維度，包含數(shù)據(jù)的主鍵唯一和候選鍵唯一；

所述一致性是表征數(shù)據(jù)關(guān)聯(lián)關(guān)系的維度，包含數(shù)據(jù)來源、冗余存儲(chǔ)和數(shù)據(jù)口徑；

所述合法性是表征數(shù)據(jù)是否在科學(xué)合理的范圍內(nèi)，包含數(shù)據(jù)的格式、類型、域值和業(yè)務(wù)規(guī)則的有效性；

所述精確性是表征數(shù)據(jù)的精確程度，包含數(shù)據(jù)格式、數(shù)據(jù)位數(shù)和數(shù)據(jù)結(jié)構(gòu)的準(zhǔn)確性；

所述及時(shí)性是表征數(shù)據(jù)維護(hù)的及時(shí)性，包含數(shù)據(jù)接入、數(shù)據(jù)上傳、數(shù)據(jù)維護(hù)和數(shù)據(jù)應(yīng)用的及時(shí)性。

優(yōu)選的，所述步驟S2具體包括根據(jù)不同的數(shù)據(jù)類型確定不同的評(píng)價(jià)維度，所述數(shù)據(jù)類型包括基礎(chǔ)數(shù)據(jù)、離線運(yùn)維數(shù)據(jù)、在線監(jiān)測(cè)數(shù)據(jù)和指標(biāo)數(shù)據(jù)。

優(yōu)選的，所述基礎(chǔ)數(shù)據(jù)包括臺(tái)帳數(shù)據(jù)、規(guī)則庫、計(jì)算方法和計(jì)算模型，所述離線運(yùn)維數(shù)據(jù)包括設(shè)備的缺陷記錄數(shù)據(jù)、預(yù)防性試驗(yàn)記錄及試驗(yàn)報(bào)告數(shù)據(jù)，所述在線監(jiān)測(cè)數(shù)據(jù)包括對(duì)設(shè)備狀態(tài)實(shí)時(shí)監(jiān)測(cè)所獲得的數(shù)據(jù)，所述指標(biāo)數(shù)據(jù)包括技術(shù)指標(biāo)數(shù)據(jù)和業(yè)務(wù)指標(biāo)數(shù)據(jù)。

優(yōu)選的，所述技術(shù)指標(biāo)數(shù)據(jù)包括數(shù)據(jù)同步或者數(shù)據(jù)上送的及時(shí)率、成功率、總耗時(shí)，以及數(shù)據(jù)傳輸?shù)目煽啃浴⒔?jīng)濟(jì)性、穩(wěn)定性指標(biāo)，所述業(yè)務(wù)指標(biāo)數(shù)據(jù)包含設(shè)備臺(tái)帳、運(yùn)維、在線監(jiān)測(cè)、狀態(tài)評(píng)價(jià)、故障預(yù)測(cè)、技術(shù)監(jiān)督涉及的數(shù)據(jù)和開展的業(yè)務(wù)應(yīng)用的核心指標(biāo)數(shù)據(jù)。

優(yōu)選的，所述基礎(chǔ)數(shù)據(jù)的評(píng)價(jià)維度包括完整性、唯一性、一致性和合法性，所述離線運(yùn)維數(shù)據(jù)的評(píng)價(jià)維度包括完整性、唯一性、精確性和合法性，所述在線監(jiān)測(cè)數(shù)據(jù)的評(píng)價(jià)維度包括完整性、一致性、精確性和及時(shí)性，所述指標(biāo)數(shù)據(jù)的評(píng)價(jià)維度包括一致性和及時(shí)性。

優(yōu)選的，所述步驟S3中的校驗(yàn)規(guī)則是基于電氣物理規(guī)律及人工數(shù)據(jù)判別規(guī)律建立的，其生成流程如下：

（1）基礎(chǔ)數(shù)據(jù)規(guī)則：數(shù)據(jù)的特征較為簡單，只對(duì)完整性、唯一性、一致性和合法性簡單的指標(biāo)進(jìn)行校核；

（2）在線監(jiān)測(cè)數(shù)據(jù)規(guī)則：首先關(guān)聯(lián)到基礎(chǔ)數(shù)據(jù)規(guī)則，通過設(shè)備定位，校驗(yàn)相關(guān)的基礎(chǔ)數(shù)據(jù)規(guī)則，然后校驗(yàn)在線監(jiān)測(cè)數(shù)據(jù)的規(guī)則，包括對(duì)的數(shù)據(jù)完整性、一致性、精確性和及時(shí)性的指標(biāo)進(jìn)行校驗(yàn)；