[發明專利]基于海量數據的綜合管理分析系統

在審

• 申請號: 201510046328.1
• 申請日: 2015-01-29
• 公開（公告）號: CN104504165A
• 公開（公告）日: 2015-04-08
• 發明（設計）人: 陳義忠;鄧華;趙維諺;李思俊;馬榮昆;楊晴;吳清華;張浩;任瑩;陳恩邦;孫幫念;蘇鳳鳴
• 申請（專利權）人: 云南電網公司帶電作業分公司;昆明能訊科技有限責任公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;H04L29/08
• 代理公司: 無
• 代理人: 無

技術領域

本發明涉及數據管理技術領域，具體涉及基于海量數據的綜合管理分析系統。

背景技術

在帶電作業管理過程中由于帶電作業專業工作的專業性要求，往往會存在大量的作業數據和培訓數據，在以往的管理中，對這些歷史數據只能作為存檔保留，無法很好的進行查詢，更別說進行數據的挖掘和分析，因此需要通過建立一種基于海量數據的綜合性管理和分析系統，以滿足帶電作業專業管理的要求，提高帶電作業工藝質量和決策提供快速、高效、可靠的輔助決策支持手段。

系統主要以下幾個方面考慮：

(1)帶電作業是一項專業的管理技術，需要通過信息系統把帶電作業專業標準進行規范化固化和管理，實現帶電作業的自動化、智能化管理，以提高帶電作業管理的規范化水平和管理效率；

(2)帶電作業具有較高的專業性特點，對帶電作業專業人員技能要求較高，需要通過信息系統建設完善的專業知識共享和培訓溝通平臺，以幫助帶電作業人員提高專業技能，降低作業風險；

(3)帶電作業是電網生產作業的重要組成部分，作業過程中產生的海量的各類數對設備狀態評價和分析具有重要作用，需要建立基于海量數據分析的專業分析系統，對這些數據進行綜合管理和分析應用；

(4)隨著電網規模的急劇增長，電網范圍內越來越多的帶電作業工作，傳統的管理模式規范性低、時效性差，已不能滿足帶電作業專業化管理的需要，但是由于其專業性的特點，目前尚缺少基于海量數據的特殊綜合性的管理分析系統；

(5)隨著公司信息化建設步伐的日趨加快，信息化建設要求越來越高，帶電作業分公司作為電網公司新成立的分公司，在信息化建設方面基本為零，為?了滿足信息化應用覆蓋等要求，迫切需要建立分公司專業的綜合分析系統，通過信息系統的推廣應用，幫助提升分公司帶電作業管理水平。

發明內容

本發明為了解決上述現有的技術缺點，提供一種基于海量數據的綜合管理分析系統，其通過對帶電作業專業領域的海量數據進行存儲和分析，為提高帶電作業工藝質量和決策支持提供快速、高效、可靠的輔助決策支持手段。

為實現上述目的，本發明提供一種基于海量數據的綜合管理分析系統，包括依次連接的因特網、防火墻、核心交換機、負載均衡服務器、交換機及服務器集群，所述服務器集群包括多臺服務器，數據分散存儲在多臺獨立的服務器上，多臺獨立的服務器分擔存儲負荷，利用位置服務器定位存儲信息，采用基于MapReduce的計算模型，通過分布式計算可以充分利用閑置計算機的計算能力把一個需要巨大的計算能力才能解決的問題分成多個部分，然后再將這些部分分配給多臺服務器進行處理，最終將這些計算結果綜合起來得到最終結果。

進一步的，所述系統采用分布式部署的架構，采用負載均衡技術，均衡每一臺服務器的負載，從而保證每一個用戶請求的訪問速度。

所述負載均衡技術為將用戶發送的請求，經過系統分析后轉發到負載小的服務器上，同時響應用戶的HTTP請求，分析請求，并轉發到Web前端機上。

所述系統采用分布式任務調度技術，所述分布式任務調度技術采用分布式任務隊列服務，用來以異步HTTP方式執行用戶任務，所述系統創建任務隊列，并插入任務，插入隊列的任務隨即會執行。

所述服務器集群中選任一臺服務器作為總服務器，該總服務器管理服務器集群中其它服務器的服務狀態以及服務器集群中服務器的增減，一旦有機器不能提供服務，總服務器重新分配服務策略。

本發明具有以下有益效果：

1、通過信息系統把帶電作業專業標準進行規范化固化和管理，實現帶電作業的自動化、智能化管理，以提高帶電作業管理的規范化水平和管理效率。

2、通過信息系統建設完善的專業知識共享和培訓溝通平臺，以幫助帶電作業人員提高專業技能，降低作業風險；

3、建立基于海量數據分析的專業分析系統，對作業過程中產生的海量的各類數據進行綜合管理和分析應用，對設備狀態評價和分析具有重要作用。

4、滿足信息化應用覆蓋等要求，通過信息系統的推廣應用，幫助提升分公司帶電作業管理水平。

附圖說明

為了更清楚地說明本發明實施例或現有技術中的技術方案，下面將對實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發明的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動性的前提下，還可以根據這些附圖獲得其他的附圖。

圖1為本發明物理網絡結構框圖；

圖2為發明分布式任務調度示意圖。

具體實施方式