[發明專利]一種流域集控大數據分類存儲方法及系統

在審

• 申請號: 202211217909.3
• 申請日: 2022-09-30
• 公開（公告）號: CN115658970A
• 公開（公告）日: 2023-01-31
• 發明（設計）人: 張顯;陳輝;胡毅;饒毅
• 申請（專利權）人: 貴州黔源電力股份有限公司
• 主分類號: G06F16/901
• 分類號: G06F16/901;G06F16/906;G06F11/14
• 代理公司: 南京禹為知識產權代理事務所(特殊普通合伙) 32272
• 代理人: 褚曉英

本發明公開了一種流域集控大數據分類存儲方法及系統包括，采集生產機組的工況數據，并進行有效驗證，剔除壞點；對剔除壞點后的數據進行分類，并對分類后的數據根據需求進行編碼；對編碼后的數據進行壓縮和備份，選擇不同存儲策略，將數據存儲在倉庫中。針對流域集控中心生產數據來源多、層次多、數量龐大的特點，改變傳統監控系統存儲方式，增加數據分類模塊、數據編碼模塊，將存儲模塊劃分為臨時倉庫和永久倉庫，解決了流域集控中心監控系統海量運行數據實施累積對存儲空間的壓力，提高數據查詢、交互、管理的的效率，壓縮和備份模塊，解決了因流域集控中心監控系統存儲空間已滿造成的存儲失敗，防止重要數據丟失。

技術領域

本發明涉及流域集控運行數據管理技術領域，尤其涉及一種流域集控大數據分類存儲方法及系統。

背景技術

隨著技術進步，當前水電站生產控制方式已經實現了梯調集控、遠程集控等先進生產模式，水電站遠程集控已經成為發展趨勢。存儲系統作為水電站集控系統的關鍵部分，存儲著電站所有生產運行數據。

但是水電站包含若干采集設備，這些采集設備分別獨立進行數據采集、數據分析及數據存儲等工作，使流域集控中心管理的生產數據具有來源多、層次多、數量龐大等特點，傳統的流域集控管理系統不加區別地存儲所有數據，不僅對存儲空間是個嚴峻挑戰，并且會造成數據的大量冗余，降低生產數據查詢和管理效率。若數據丟失，更會對電廠穩定運行造成比較大的危害。

發明內容

本部分的目的在于概述本發明的實施例的一些方面以及簡要介紹一些較佳實施例。在本部分以及本申請的說明書摘要和發明名稱中可能會做些簡化或省略以避免使本部分、說明書摘要和發明名稱的目的模糊，而這種簡化或省略不能用于限制本發明的范圍。

鑒于上述現有存在的問題，提出了本發明。

因此，本發明提供了一種流域集控大數據分類存儲方法及系統，能夠解決流域集控監控系統海量運行數據實施累積對存儲空間的壓力過大，數據查詢、交互、管理的的效率過低以及數據冗余等問題。

為解決上述技術問題，本發明提供如下技術方案，一種流域集控大數據分類存儲方法，包括：

采集生產機組的工況數據，并進行有效驗證，剔除壞點；

對剔除壞點后的數據進行分類，并對分類后的數據根據需求進行編碼；

對編碼后的數據進行壓縮和備份，選擇不同存儲策略，將數據存儲在倉庫中。

一種流域集控大數據分類存儲系統，其特征在于：包括數據采集模塊、驗證模塊、數據分類模塊、數據編碼模塊、數據存儲模塊、數據備份模塊和數據壓縮模塊，

數據采集模塊，用于采集機組生產設備產生的數據；

驗證模塊，用于對采集的生產數據有效性進行驗證，剔除其中的壞點，保證存儲的狀態數據的正確性及各類狀態分析結果的準確性；

數據分類模塊，用于根據數據功能和層次將數據進行分類；

數據編碼模塊，用于對所述數據分類模塊分類后的信息進行編碼；

數據存儲模塊，用于讀取編碼信息，根據數據不同的分類，選擇不同存儲策略進行存儲；

數據備份模塊，用于定時將分類數據從現地數據臨時倉庫內備份至數據永久存儲倉庫，并生成備份記錄；

數據壓縮模塊，用于自動對數據進行無損壓縮。

作為本發明所述的流域集控大數據分類存儲系統的一種優選方案，其中：所述數據分類模塊將所述驗證模塊驗證后的數據分類為瞬態數據、特征數據、趨勢數據、特征參數數據與決策數據，