[發明專利]基于大數據分析的通信網絡預警分析系統

在審

• 申請號: 201610949249.6
• 申請日: 2016-10-26
• 公開（公告）號: CN106850249A
• 公開（公告）日: 2017-06-13
• 發明（設計）人: 張筱筠;司富軒;張韶華;程崟峰;李雄;李文萃;舒新建
• 申請（專利權）人: 中國電力技術裝備有限公司鄭州電力設計院
• 主分類號: H04L12/24
• 分類號: H04L12/24;G06F17/30;G06Q50/06
• 代理公司: 鄭州金成知識產權事務所(普通合伙)41121
• 代理人: 郭增欣

1.一種基于大數據分析的通信網絡預警分析系統，其步驟是：

A、通過SOA架構把骨干傳輸網分為網絡控制和數據采集層、平臺層、管理應用層，實現不同級骨干傳輸網的全面管理，并通過SOA架構之間的系統互聯，完成通信管理系統同級之間及上下級之間中不同級骨干傳輸網的信息橫向共享和應用協同；

B、綜合通信管理系統的履歷信息、臺帳信息、業務使用信息及根據通信網絡資源占用的層級分布，從光纖資源、復用段資源、通道資源多方面綜合分析資源的利用情況，實時對通信設備和通信光纜的資源使用情況的數據進行儲存；

C、數據的采集、導入與預處理：對通信管理系統、客戶端、通信設備和通信光纜的數據進行采集，對采集的數據通過對象化并行計算框架在一個集中的大型分布式數據庫或者分布式存儲集群中進行負載均衡或分片儲存，在儲存過程中使用來自Twitter的Storm來對采集的數據進行流式計算；

D、數據的統計與分析：通過基于云計算的用電信息采集與數據分析平臺，并利用分布式數據庫或分布式計算集群，通過EMC的GreenPlum、Oracle的Exadata以及基于MySQL的列式存儲Infobright和基于半結構化數據需求使用的Hadoop，對存儲的海量數據進行普通的分析和分類匯總，以滿足大多數常見的分析需求；

E、數據的挖掘：使用Hadoop的Mahout對現有存儲的數據進行用于聚類的Kmeans計算、用于統計學習的SVM計算、用于分類的NaiveBayes計算，從而實現一些高級別數據分析的需求，從而起到預測的效果；

所述對象化并行計算框架將業務數據對象化，用對象取代二維表，并采用對象化并行計算技術，將計算功能封裝在對象內部并通過對象接口對外服務，通過調用不同對象服務器上的對象接口，實現并行計算，將大數據上的統計分析轉化為小數據的統計分析，小數據的統計分析又借助于內存優于磁盤的計算性能進行計算。

2.根據權利要求1所述的基于大數據分析的通信網絡預警分析系統，其特征是：所述對象化并行計算框架是基于數據緩存技術，將各類數據以對象形式緩存到數據庫中，提供對象的高效索引及訪問，并具有數據橫向擴展技術，通過在線擴展對象服務器來緩存增加的數據，提供基于對象的數據計算服務。

3.根據權利要求1所述的基于大數據分析的通信網絡預警分析系統，其特征是：所述基于云計算的用電信息采集與數據分析平臺采用增加索引、進行數據分區、優化SQL代碼等形式，優化現有關系型數據庫系統的處理性能；并通過ETL的手段，實現關系型數據庫與非關系型數據處理環境之間的數據共享和互補協作，實現現有系統向云計算環境下的平穩遷移和可持續發展。

4.根據權利要求1所述的基于大數據分析的通信網絡預警分析系統，其特征是：所述基于云計算的用電信息采集與數據分析平臺包括一個平臺和六個核心應用，所述一個平臺為用電信息采集系統的云計算平臺，所述六個核心應用包括用戶抄表數據與電量數據的存儲和查詢、用戶電量計算統計、臺區線損計算分析、報文數據分析、低壓數據完整率計算分析、檔案類數據ETL。

5.根據權利要求1所述的基于大數據分析的通信網絡預警分析系統，其特征是：所述客戶端包括Web、App或者傳感器。