[發明專利]一種配電網海量數據融合方法及裝置

有效

• 申請號: 201710518985.0
• 申請日: 2017-06-29
• 公開（公告）號: CN107391596B
• 公開（公告）日: 2023-09-22
• 發明（設計）人: 刁贏龍;劉科研;孟曉麗;盛萬興;何開元;賈東梨;胡麗娟;葉學順;董偉杰;黃仁樂;王存平
• 申請（專利權）人: 中國電力科學研究院;國家電網公司;國網北京市電力公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/27;G06Q50/06
• 代理公司: 北京安博達知識產權代理有限公司 11271
• 代理人: 徐國文

一種配電網海量數據融合方法及裝置，包括：為多源數據建立統一的數據通道，通過所述數據通道抽取數據信息；根據抽取到的數據信息確定數據所屬個體；基于數據所屬個體將所述數據信息采用相應的預設融合的方式建立分析數據集。本發明提供的技術方案提升了配電網數據可用性，實現靜態數據和動態數據之間的融合，實現跨系統數據間業務協同，提升配電網輔助決策與計算分析的精度，滿足統一決策分析的需要。

技術領域

本發明涉及數據融合方法，具體涉及一種配電網海量數據融合方法及裝置。

背景技術

隨著智能電網建設的持續深入，計算機輔助決策得到廣泛應用，如開關狀態?評估、故障處理、基于可靠性的檢修維護、網絡薄弱環節和瓶頸分析、運行方式?優化、供電質量統計等，針對每種業務系統都有一套獨立的、滿足各自標準的數?據庫和數據邏輯，開展各種單獨的業務決策與計算分析，跨部門統一決策和工作?難度極大，配電網智能輔助決策過程的瓶頸在于數據融合，當前在信息領域研究?中，多個大數據工具和系統已經對數據融合、數據拼接技術進行了一系列實現，?然而對于邏輯復雜、實時性要求高，海量靜態臺賬數據與高速動態量測數據并存?的配電網來說，要想對多源異構數據進行有效充分融合，使其符合配電網智能化?輔助決策和統一數據服務的要求是當前配電網研究領域的挑戰之一。

配電網數據具有以下特點，(1)高并發性，遠方監測終端對象數量龐大且分?布廣泛，基于非循環式遠動規約同時提交配電網數據，流量驚人。(2)時序性強，?數據在采集、傳輸、分析和存儲過程中以數據流的形式持續出現，需要以盡可能?高效的方式對數據進行即時處理。(3)數據處理代價高昂，量測數據一般為高精?度浮點數且數值敏感性較強，同時配電網分析算法復雜，需要大量硬件資源才能?實現數據傳輸與處理。所以即使對少量數據進行處理也需要較高的存儲和計算成?本。

多種數據系統中的數據結構還具有如下特點：(1)各業務系統各自為政，以?滿足系統運轉的最小業務需求為目標，系統與系統間沒有足夠的分享機制和通?道。(2)由于通信和處理能力的限制，數據量嚴重缺失，有時無法滿足交互對象?系統的應用需要。綜上所述對于配電網海量數據，數據源是多樣的、自然形成的、?海量的數據常常是半結構或無結構的，要想進行充分有效融合，其技術難度和管?理制度難度是巨大的。

因此，為解決上述問題，本發明提供了一種配電網海量數據融合方法及裝置。

發明內容

為了解決現有技術中所存在的上述不足，本發明提供一種配電網海量數據融?合方法及裝置。所述方法包括：

為多源數據建立統一的數據通道；

通過所述數據通道抽取數據信息；

根據抽取到的數據信息確定數據所屬個體；

基于數據所屬個體將所述數據信息采用相應的預設融合方式建立分析數據?集。

優選的，所述多源數據包括動態數據和靜態數據。

優選的，還包括對所述動態數據進行結構化梳理，所述結構化梳理為對缺失、?錯誤數據進行剔除并添加數據異常標簽。

優選的，所述為多源數據建立統一的數據通道，包括：通過配置文件將所述?多源數據信息轉化為統一格式的數據信息。

優選的，所述通過數據通道抽取數據信息，包括：由所述數據通道從數據融?合窗口讀入的數據中抽取數據信息；

所述數據融合窗口讀入的數據，包括在一定時間窗口下采用輪詢的方式抽取?數據信息。

優選的，所述根據抽取到的數據信息確定數據所屬個體包括：檢查來源數據?所屬個體的表示量是否充分，若不充分，補充所述個體相關數據結構。

優選的，所述基于數據所屬個體將所述數據信息采用相應的預設融合方式建?立分析數據集，包括：