[發明專利]一種可實時對水雨情數據進行檢驗的系統和方法

在審

• 申請號: 201710777663.8
• 申請日: 2017-09-01
• 公開（公告）號: CN107357941A
• 公開（公告）日: 2017-11-17
• 發明（設計）人: 邱超
• 申請（專利權）人: 浙江省水文局
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06Q10/04;G06Q50/26
• 代理公司: 北京市盈科律師事務所11344
• 代理人: 劉立國

技術領域

本發明涉及一種水情數據分析方法，具體是一種分析歷史水情信息(包括水位、流量、雨量等)，為用戶提供高質的水情分析結果服務的一種提高實時水文預報精度的方法，屬于涉及公共利益的智能化基礎設施領域。

背景技術

水文預報指是指根據前期或現時的水文氣象資料，對某一水體、某一地區或某一水文站在未來一定時間內的水文情況作出定性或定量的預測，為防汛抗旱、水庫的施工調度、水資源的有效利用等提供依據。水雨情實時預報中，水雨情實時數據的檢驗是在數據分析與挖掘之前所必須解決的關鍵性問題，傳統的水雨情實時數據的檢驗只能靠數據庫服務器進行單個的處理，對于現有的關于水雨情實時數據的檢驗結構存在如下的缺陷：第一，其結構較簡單，組織結構單一，無法進行多重檢驗，所以會出現檢驗不夠準確，因而會存在誤報情況，一旦正確的信息被誤報成錯誤的或者通過了不合理的數據，會造成水雨情數據分析更大的誤差；第二，無應用系統呈現，檢驗規則與過程不可視化，不便于人們的管理；第三，無法實現海量數據存儲與分布式高速運算，從而無法快速檢驗并且存在誤報情況，一旦正確的信息被誤報成錯誤的或通過了不合理的數據，會造成水雨情數據分析更大的誤差，且現有的水文預報方式不能夠快速校驗模型預測準確率，也不能夠實現重復調用優化分析結果，解決不了現有的水情數據分析中的水文歷史數據和實時數據的聯動分析等問題。

發明內容

針對現有技術中的不足，本發明提供了一種可實時對水雨情數據進行檢驗的系統和方法，其實現計算能力的提升，深度挖掘數據中存在的價值的功能，使分析嘗試更有效率，分析人員可以通過工具快速的以可視化的方式自助實現分析價值的預判，節省時間與學習成本，優化分析結果，這樣就可以為用戶提供高質的水情分析結果。

為了實現上述目的，本發明所采取的技術方案是：

一種可實時對水雨情數據進行檢驗的系統，包括高速待檢數據存儲系統、交換機和聯機分析處理系統(OLAP)，高速待檢數據存儲系統和聯機分析處理系統之間通過交換機相連接，聯機分析處理系統包括數據庫服務器、歷史數據庫、可進行網頁應用顯示器、海量數據存儲備份器和至少一臺分布式運算管理/處理器，數據庫服務器分別連接有歷史數據庫、可進行網頁應用顯示器、海量數據存儲備份器和至少一臺分布式運算管理/處理器，數據庫服務器還連接有數據檢驗模塊和輸出模塊。

所述數據檢驗模塊分為第一檢測單元和第二檢測單元，第一檢測單元用來檢測具有相同單位的歷史數據與實時的水文信息進行對比，比較是否在歷史數據區間的閥值內；第二檢測單元用來將實時的水文信息與歷史數據同期進行對比，尋找數據隨月、季、年時間跨度的周期波動規律。

所述至少一臺分布式運算管理/處理器為三臺。

本發明的可進行網頁應用顯示器可對整個運算比對過程呈現在操作者面前，便于管理員的操作，高速待檢數據存儲系統通過傳感器(流量傳感器、流速傳感器、水位傳感器等)匯集大量實時流量、流速、水位等數據，高速待檢數據存儲系統通過交換機將這些數據分別以最快速度傳至聯機分析處理系統的分布式運算管理/處理器中，同時通過海量數據存儲備份器進行快速備份，由于分布式運算管理/處理器至少一臺，通過數據庫服務器進行快速傳輸分配到每臺分布式運算管理/處理器中，同時每臺分布式運算管理/處理器也會結合歷史數據庫中不同類別的數據在進行處理數據，且處理完之后的數據回傳給數據庫服務器，所述數據檢驗模塊分為第一檢測單元和第二檢測單元，第一檢測單元從數據庫服務器中調取對應的信息與歷史數據庫中的信息進行對比，其用來檢測具有相同單位的歷史數據與實時的水文信息進行對比，比較是否在歷史數據區間的閥值內，第二檢測單元從數據庫服務器中調取對應的信息與歷史數據庫中的信息進行對比，其用來將實時的水文信息與歷史數據同期進行對比，尋找數據隨月、季、年時間跨度的周期波動規律，通過數據檢驗模塊篩選出合理的數據并通過，將明顯失真的數據篩除，然后通過數據庫服務器傳輸給輸出模塊，輸出模塊可把輸出分析信息推送給防汛部門應用端,提供分析防汛信息為部門或社會提供水情分析結果。

本發明的有益效果：本發明提供可實時對水雨情數據進行檢驗系統，有效解決了現有的水情數據分析方法無法處理復雜的數據結構，數據交換效率不高，歷史數據利用率低，系統監控管理能力有待提高等問題，具有能夠提高分布式數據源的采集范圍及效率，提升對海量歷史數據的深度挖掘分析能力，優化分析結果，為用戶提供高質的水情分析結果服務。

一種可實時對水雨情數據進行檢驗的方法，包括以下步驟：