[發(fā)明專利]一種天然氣管道清管作業(yè)的數(shù)據(jù)倉庫及數(shù)據(jù)挖掘方法

有效

• 申請?zhí)枺?/td>: 202110694989.0
• 申請日: 2021-06-22
• 公開（公告）號: CN113254508B
• 公開（公告）日: 2022-10-11
• 發(fā)明（設(shè)計）人: 賈文龍;鄧乾星;吳瑕;李俊逸;雍雪梅;江林峪;孫璐璐
• 申請（專利權(quán)）人: 西南石油大學(xué)
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/25;G06F30/18;G06F30/20;G06F113/14;G06F119/12;G06F119/14
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發(fā)明專利公開了一種天然氣管道清管作業(yè)的數(shù)據(jù)倉庫及數(shù)據(jù)挖掘方法。本方法的步驟是：首先是確定天然氣管道清管作業(yè)的數(shù)據(jù)源；其次是利用ETL工具完成數(shù)據(jù)集成；然后根據(jù)Epicentre數(shù)據(jù)模型建立天然氣管道清管作業(yè)數(shù)據(jù)倉庫；而后將數(shù)據(jù)從倉庫中提取出來并加載到數(shù)據(jù)集市中；最后基于定義的算法開展天然氣管道清管作業(yè)的數(shù)據(jù)挖掘。本發(fā)明充分考慮實際清管作業(yè)數(shù)據(jù)的價值性和離散性，實現(xiàn)了清管作業(yè)數(shù)據(jù)的一致性和完整性，為評估天然氣管道清管作業(yè)安全提供了管治依據(jù)，為開展天然氣管道清管作業(yè)數(shù)據(jù)挖掘和智慧清管提供了技術(shù)支持。

技術(shù)領(lǐng)域

本發(fā)明屬于天然氣輸送管道的安全保障領(lǐng)域，尤其涉及一種天然氣管道清管作業(yè)的數(shù)據(jù)倉庫及數(shù)據(jù)挖掘方法。

背景技術(shù)

天然氣是一種清潔的優(yōu)質(zhì)能源和化工原料，而管道輸送是天然氣的主要運輸方式。根據(jù)國家發(fā)改委和國家能源局發(fā)布的《中長期管網(wǎng)發(fā)展規(guī)劃》，預(yù)計到2025年，我國天然氣管道的總里程將達到16.3萬千米。天然氣管道在投產(chǎn)和日產(chǎn)運行過程中，需要通過清管作業(yè)來清除在建設(shè)或運輸過程中留下的污物、雜質(zhì)和積液等，以達到提供管道輸送效率、延長管道使用年限、保障管道安全運行的目的。

當(dāng)前，天然氣管道清管作業(yè)主要以站場為單位、管段為區(qū)間展開，其產(chǎn)生的清管作業(yè)數(shù)據(jù)是清管方案的直觀體現(xiàn)，也是反應(yīng)天然氣管道運行情況的一個重要依據(jù)。然而，天然氣管道清管作業(yè)數(shù)據(jù)信息量大，有用信息少，且以較為分散的形式存儲在各個不同站場的工作日志或不同系統(tǒng)的數(shù)據(jù)庫中，容易出現(xiàn)數(shù)據(jù)的不一致性及不完整性。數(shù)據(jù)倉庫是一種高效的數(shù)據(jù)存儲系統(tǒng)，可將來自異地、異構(gòu)數(shù)據(jù)源或其它數(shù)據(jù)庫中的數(shù)據(jù)，經(jīng)加工后在數(shù)據(jù)倉庫中存儲、提取和維護，形成一系列面向主題的、集成的、穩(wěn)定的、不同時間序列的集合，為用戶提供一個綜合的、面向分析和決策的應(yīng)用環(huán)境。數(shù)據(jù)挖掘是從大量的數(shù)據(jù)中挖掘出有用的信息，從而作為決策支持。當(dāng)前，現(xiàn)有的天然氣管道清管作業(yè)數(shù)據(jù)具有離散性、海量性、真實性、可見性、關(guān)聯(lián)性、價值性、專業(yè)性等特點，并存在著開展數(shù)據(jù)挖掘和智能化研究難度大等問題。因此，現(xiàn)有的天然氣管道清管作業(yè)數(shù)據(jù)存儲方式不能對數(shù)據(jù)進行專門分類、高效存儲及有效利用，更不能為數(shù)據(jù)挖掘提供技術(shù)支持，還不能對某天然氣管道的清管規(guī)律進行探究。因此，有必要采取一種方法來建立天然氣管道清管作業(yè)的數(shù)據(jù)倉庫，并對某天然氣管道的歷史清管作業(yè)數(shù)據(jù)進行分析計算，從而解決天然氣管道清管作業(yè)數(shù)據(jù)的不一致性和不完整性，并滿足從歷史清管作業(yè)數(shù)據(jù)中挖掘有用信息的需求，為指導(dǎo)未來智慧清管建設(shè)與應(yīng)用提供技術(shù)支持。

綜上所述，目前天然氣管道清管作業(yè)數(shù)據(jù)具有離散性、海量性、真實性、可見性、關(guān)聯(lián)性、價值性、專業(yè)性等特點，且具有不一致性及不完整等問題，尚沒有成熟高效的清管作業(yè)數(shù)據(jù)倉庫對歷史清管作業(yè)數(shù)據(jù)進行專門分類、高效存儲，也無法對歷史清管作業(yè)數(shù)據(jù)進行便捷維護、有效利用。而本方法可以提供一種天然氣管道清管作業(yè)的數(shù)據(jù)倉庫及數(shù)據(jù)挖掘方法，從而構(gòu)建天然氣管道清管作業(yè)的數(shù)據(jù)倉庫系統(tǒng)，并對歷史清管作業(yè)數(shù)據(jù)進行分析處理、開展數(shù)據(jù)挖掘，從而解決天然氣管道的清管作業(yè)數(shù)據(jù)的不一致性和不完整性問題，實現(xiàn)清管作業(yè)數(shù)據(jù)統(tǒng)一性和完整性，為開展天然氣管道清管作業(yè)數(shù)據(jù)的信息挖掘、有效利用提供技術(shù)支持，為制定清管方案提供決策依據(jù)，為評估天然氣管道清管過程的安全性提供參考。

發(fā)明內(nèi)容

本發(fā)明提供了一種天然氣管道清管作業(yè)的數(shù)據(jù)倉庫及數(shù)據(jù)挖掘方法，以解決現(xiàn)有技術(shù)中的各種缺陷和不足，本發(fā)明采取的技術(shù)方案如下：

提供一種天然氣管道清管作業(yè)的數(shù)據(jù)倉庫及數(shù)據(jù)挖掘方法，該方法包括以下步驟：

步驟一，確定天然氣管道清管作業(yè)的數(shù)據(jù)源。數(shù)據(jù)源是存放于各業(yè)務(wù)部門的最原始數(shù)據(jù)，是天然氣管道清管作業(yè)產(chǎn)生的信息記錄和計算結(jié)果，包括各業(yè)務(wù)部門的工作日志、其它軟件或系統(tǒng)的數(shù)據(jù)庫、清管作業(yè)記錄、天然氣管道的設(shè)計資料等；

步驟二，天然氣管道清管作業(yè)的數(shù)據(jù)集成。數(shù)據(jù)集成是利用ETL工具將清管作業(yè)數(shù)據(jù)從數(shù)據(jù)源中抽取出來，然后根據(jù)定義的映射關(guān)系，將數(shù)據(jù)加載到數(shù)據(jù)倉庫中，并在加載過程中檢查數(shù)據(jù)的合法性，并將加載結(jié)果記錄到數(shù)據(jù)集成的工作日志中以備查詢；