[發(fā)明專利]一種面向Hadoop集群的分布式監(jiān)控管理系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201610010050.7
• 申請日: 2016-01-08
• 公開（公告）號: CN105718351A
• 公開（公告）日: 2016-06-29
• 發(fā)明（設(shè)計）人: 許丹霞;劉寅;汪偉;鄭宇
• 申請（專利權(quán)）人: 北京匯商融通信息技術(shù)有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F11/32
• 代理公司: 北京迎碩知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11512
• 代理人: 呂良;張群峰

1.一種用于分布式集群系統(tǒng)的分布式監(jiān)控管理系統(tǒng)，其特征在于 包括：性能監(jiān)控模塊，故障報警模塊，綜合分析查詢模塊，綜合展示 模塊，數(shù)據(jù)存儲模塊，配置管理模塊，系統(tǒng)管理模塊，其中：

性能監(jiān)控模塊用于監(jiān)控分布式集群系統(tǒng)中各個被監(jiān)控節(jié)點的性 能，并將采集到的監(jiān)控數(shù)據(jù)存儲到數(shù)據(jù)存儲模塊；

故障報警模塊用于根據(jù)數(shù)據(jù)存儲模塊中存儲的監(jiān)控數(shù)據(jù)進行故 障報警，或者接收監(jiān)控節(jié)點和被監(jiān)控節(jié)點傳送的報警數(shù)據(jù)，將接收到 的報警數(shù)據(jù)存儲到數(shù)據(jù)存儲模塊并根據(jù)該數(shù)據(jù)進行故障報警；

綜合分析查詢模塊用于讀取數(shù)據(jù)存儲模塊中的監(jiān)控數(shù)據(jù)或報警 數(shù)據(jù)，進行計算分析，將計算后的分析結(jié)果存入數(shù)據(jù)存儲模塊；

數(shù)據(jù)存儲模塊用于存儲監(jiān)控數(shù)據(jù)或報警數(shù)據(jù)；

綜合展示模塊用于展示綜合分析查詢模塊的分析結(jié)果；

系統(tǒng)管理模塊用于進行用戶管理及權(quán)限管理；

配置管理模塊用于對分布式集群系統(tǒng)進行統(tǒng)一配置。

2.根據(jù)權(quán)利要求1所述的分布式監(jiān)控管理系統(tǒng)，其特征在于：

性能監(jiān)控模塊包括收集模塊和匯聚模塊；

收集模塊用于讀取被監(jiān)控節(jié)點的監(jiān)控數(shù)據(jù)，并將收集到的監(jiān)控數(shù) 據(jù)傳輸給匯聚模塊；

匯聚模塊收集監(jiān)控數(shù)據(jù)并匯總存儲到數(shù)據(jù)存儲模塊。

3.根據(jù)權(quán)利要求1所述的分布式監(jiān)控管理系統(tǒng)，其特征在于：

故障報警模塊，用于掃描數(shù)據(jù)存儲模塊中的數(shù)據(jù)，確定告警信息 的級別和種類，發(fā)出短信或郵件報警；或者接收監(jiān)控節(jié)點和被監(jiān)控節(jié) 點上的報警信息收集模塊傳送的報警數(shù)據(jù)，將該接收的報警數(shù)據(jù)存儲 到數(shù)據(jù)存儲模塊，并根據(jù)報警數(shù)據(jù)的級別和種類，發(fā)出短信或郵件報 警。

4.根據(jù)權(quán)利要求1所述的分布式監(jiān)控管理系統(tǒng)，其特征在于： 綜合展示模塊進行如下之一或其組合的展示：

(1)今日告警項目統(tǒng)計：以柱狀圖的形式表現(xiàn)出當前集群故障狀 態(tài)，有多少故障服務(wù)器、故障服務(wù)和故障組件；

(2)集群服務(wù)器狀態(tài)：將集群服務(wù)器分為三種狀態(tài)：正常、故障 與高負荷；

(3)未解決告警列表：所有未解決的告警；

(4)可改變粒度的資源使用時序圖：包括CPU利用率，內(nèi)存利 用率。

5.根據(jù)權(quán)利要求1所述的分布式監(jiān)控管理系統(tǒng)，其特征在于： 數(shù)據(jù)存儲模塊包括RRD和Mysq1，監(jiān)控數(shù)據(jù)存儲在RRD中，報警數(shù)據(jù) 存儲在Mysq1中。

6.一種用于分布式集群系統(tǒng)的分布式監(jiān)控管理方法，其特征在于 包括以下步驟：

步驟1.監(jiān)控分布式集群系統(tǒng)中的被監(jiān)控節(jié)點，將監(jiān)控數(shù)據(jù)存儲 到數(shù)據(jù)存儲模塊；

步驟2.根據(jù)存儲的監(jiān)控數(shù)據(jù)進行故障報警，或者接收監(jiān)控節(jié)點 和被監(jiān)控節(jié)點上的報警信息收集模塊傳送的報警數(shù)據(jù)，將該接收的報 警數(shù)據(jù)存儲到數(shù)據(jù)存儲模塊并根據(jù)該信息進行故障報警；

步驟3.讀取數(shù)據(jù)存儲模塊中的監(jiān)控數(shù)據(jù)或報警數(shù)據(jù)，進行計算 分析，保存計算后的分析結(jié)果；

步驟4.展示綜合分析查詢模塊的分析結(jié)果；

步驟5.進行用戶管理及權(quán)限管理；

步驟6.對分布式集群系統(tǒng)進行統(tǒng)一配置。

7.根據(jù)權(quán)利要求6所述的分布式監(jiān)控管理方法，其特征在于：

步驟1中的監(jiān)控包括：讀取被監(jiān)控節(jié)點的監(jiān)控數(shù)據(jù)，將收集到的 監(jiān)控數(shù)據(jù)匯總存儲。

8.根據(jù)權(quán)利要求6所述的分布式監(jiān)控管理方法，其特征在于： 步驟2中的故障報警具體為掃描數(shù)據(jù)存儲模塊中的數(shù)據(jù)，確定告警信 息的級別和種類，發(fā)出短信或郵件報警；或者接收監(jiān)控節(jié)點和被監(jiān)控 節(jié)點上的報警信息收集模塊所傳送的報警數(shù)據(jù)，將該接收的報警數(shù)據(jù) 存儲到數(shù)據(jù)存儲模塊，并根據(jù)報警數(shù)據(jù)的級別和種類，發(fā)出短信或郵 件報警。