[發明專利]支持一體化部署及監控的保護運行大數據支撐平臺

有效

• 申請號: 201710831332.8
• 申請日: 2017-09-15
• 公開（公告）號: CN107733986B
• 公開（公告）日: 2021-01-26
• 發明（設計）人: 高宏慧;丁曉兵;余江;鄭茂然;劉智勇;陳宏山;張靜偉;呂梁
• 申請（專利權）人: 中國南方電網有限責任公司;山大地緯軟件股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 濟南圣達知識產權代理有限公司 37221
• 代理人: 張勇

本發明公開了支持一體化部署及監控的保護運行大數據支撐平臺，包括：多源異構保護運行數據集成模塊、分布式大數據存儲模塊、分布式大數據分析模塊、資源管理模塊和監控模塊；多源異構保護運行數據集成模塊，從外部系統及保護運行設備中獲取保護運行大數據，數據抽取并將數據轉換為所需的數據結構存儲到分布式大數據存儲模塊，將分布式大數據分析模塊的分析結果回寫入分布式大數據存儲模塊中，并實現通過統一接口對外提供數據檢索；分布式大數據存儲模塊，存儲從多源異構保護運行數據集成模塊獲取的保護運行大數據，為分布式大數據分析模塊的分析業務提供數據基礎；監控模塊，為用戶直觀展示集群及作業的運行情況，為分析計算性能的優化提供支撐。

技術領域

本發明涉及大數據領域，尤其涉及支持一體化部署及監控的保護運行大數據支撐平臺。

背景技術

隨著智能變電站、智能電表、實時監測系統、現場移動檢修系統、測控一體化系統，以及一大批服務于各個專業的信息管理系統的建設和應用，電力系統運行時將產生數量龐大、增長快速、結構多樣、來源復雜的大量數據，是典型的大數據。因此通過大數據技術辨識電力網絡中的脆弱環節，及時進行電網災難預警，對提高電力系統的可靠性，降低大規模停電事故的發生概率有重要意義。不僅可提升電網自身的管理、運行水平，而且可為政府部門、工業界和廣大用戶提供更多更好的服務，為電力公司拓展增值業務提供條件。

在保護運行領域，已有各種大數據分析方法的應用，但系統化、規模化的大數據應用還遠未展開。特別是，在處理二次設備或系統所監測或記錄的大規模時空多維數據，尋求電力設備、設施、系統的狀態變化規律及其相互之間的關聯或影響規律時，海量數據的處理存儲、海量數據的知識挖掘以及數據驅動的保護運行與分析方法等方面的大數據應用需求，還遠未得到滿足。

在實際的應用過程中，也存在部分急需解決的問題：首先是環境搭建只能靠人工完成，工作量大，且容易出現誤操作；其次是在實際的開發過程中，大部分的工作需要代碼完成，編寫復雜；同時，在集群運行過程中，沒有將監控做到一體化，隨之產生的是對集群與作業的監管力度不夠，排查問題較難，不能實時預警；此外，目前的大數據應用，沒有充分利用集群資源，很多時候存在集群壓力過大或資源浪費的情況。因此需要建立支持一體化部署及監控的保護運行大數據支撐平臺，為保護運行大數據分析計算提供一體化的解決方案。

發明內容

本發明的目的就是為了解決上述問題，提供支持一體化部署及監控的保護運行大數據支撐平臺，具備多源異構數據源的統一接入能力，包含具備動態負載均衡能力的分布式數據存儲，支持離線數據計算和在線任務計算自適應調度的混合計算框架，實現了具備靈活、方便的自動化部署和集群配置的運行態配置調整，提供集群運行監控、負載動態評估和自動化配置優化建議，為多種類型業務的海量數據計算提供穩定、高效、便捷的計算支撐環境。

為了實現上述目的，本發明采用如下技術方案：

支持一體化部署及監控的保護運行大數據支撐平臺，包括：多源異構保護運行數據集成模塊、分布式大數據存儲模塊、分布式大數據分析模塊、資源管理模塊和監控模塊；

多源異構保護運行數據集成模塊，用于從外部系統及保護運行設備中獲取保護運行大數據，對數據進行抽取并將數據轉換為所需的數據結構存儲到分布式大數據存儲模塊，將分布式大數據分析模塊的分析結果回寫入分布式大數據存儲模塊中，并實現通過統一接口對外提供數據檢索。

分布式大數據存儲模塊，用于存儲從多源異構保護運行數據集成模塊獲取的保護運行大數據，為分布式大數據分析模塊的分析業務提供數據基礎；

分布式大數據分析模塊，用于根據資源管理模塊提交的作業，對存儲在分布式大數據存儲模塊中的保護運行大數據進行分析處理，挖掘數據價值，將分析結果反饋給用戶，并將分析結果存儲到分布式大數據存儲模塊中。

資源管理模塊，用于接收用戶請求，進行資源管理及作業調度，支撐與用戶的可視化交互。