[發(fā)明專利]一種資源監(jiān)控方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201410367633.6
• 申請日: 2014-07-29
• 公開（公告）號: CN104092575A
• 公開（公告）日: 2014-10-08
• 發(fā)明（設(shè)計(jì)）人: 王少鋒;張?jiān)朴?/a>;劉明輝
• 申請（專利權(quán)）人: 中國聯(lián)合網(wǎng)絡(luò)通信集團(tuán)有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24
• 代理公司: 北京安信方達(dá)知識產(chǎn)權(quán)代理有限公司 11262
• 代理人: 李丹;栗若木

技術(shù)領(lǐng)域

本發(fā)明涉及云計(jì)算技術(shù)，尤指一種基于云計(jì)算平臺的資源監(jiān)控方法及系統(tǒng)。

背景技術(shù)

計(jì)算機(jī)運(yùn)行時，需要對資源的運(yùn)行狀況進(jìn)行實(shí)時監(jiān)控，比如CPU使用率、內(nèi)存使用率等。現(xiàn)有監(jiān)控中，需要在系統(tǒng)中植入代碼，這樣必然影響系統(tǒng)的性能。特別是在云計(jì)算平臺中，涉及的應(yīng)用、資源眾多，部署環(huán)境要求高，往往涉及集群，系統(tǒng)運(yùn)行情況復(fù)雜，如果不能對云計(jì)算平臺進(jìn)行準(zhǔn)確、有效的監(jiān)控，則難以對云計(jì)算平臺的實(shí)際運(yùn)行情況進(jìn)行掌控及調(diào)度。

監(jiān)控在云計(jì)算系統(tǒng)中扮演著重要的角色。通過監(jiān)控能夠及時發(fā)現(xiàn)云計(jì)算平臺在運(yùn)營過程中的資源使用情況，從而及時發(fā)現(xiàn)異常情況。

云計(jì)算平臺監(jiān)控的一般原理是，在各個分散的云計(jì)算節(jié)點(diǎn)上運(yùn)行守護(hù)進(jìn)程，該守護(hù)進(jìn)程用于收集本云計(jì)算節(jié)點(diǎn)上的監(jiān)控信息并發(fā)送到匯聚節(jié)點(diǎn)，匯聚節(jié)點(diǎn)對收集到的監(jiān)控信息進(jìn)行分析與存儲并將分析結(jié)果以可視化或告警等方式通知給用戶。對于云計(jì)算平臺監(jiān)控系統(tǒng)來說，關(guān)鍵是各個云計(jì)算節(jié)點(diǎn)的守護(hù)進(jìn)程與收集的監(jiān)控信息的處理方式。

當(dāng)前，比較流行的監(jiān)控系統(tǒng)有Ganglia，InteMon，ClusterProbe，HP?OpenView，IBM?Tivoli等。其中，Ganglia，InteMon，ClusterProbe是開源軟件，HP?OpenView，IBM?Tivoli是商用軟件。

其中，ClusterProbe是現(xiàn)有常用的監(jiān)控系統(tǒng)。ClusterProbe是由香港大學(xué)設(shè)計(jì)與開發(fā)的一款開放環(huán)境的集群監(jiān)控工具。ClusterProbe的設(shè)計(jì)初衷在于開發(fā)高靈活性與擴(kuò)展性的大規(guī)模集群監(jiān)控系統(tǒng)。ClusterProbe主要包括監(jiān)控服務(wù)器、監(jiān)控代理節(jié)點(diǎn)和節(jié)點(diǎn)代理三部分，即代理(agent)+服務(wù)器(server)的方式。其中，監(jiān)控服務(wù)器，用于接收用戶的請求以及將用戶感興趣的監(jiān)控結(jié)果反饋給用戶，監(jiān)控服務(wù)器通過交互適配器和網(wǎng)絡(luò)上其它節(jié)點(diǎn)交互信息，該適配器能夠支持多種網(wǎng)絡(luò)交互協(xié)議；監(jiān)控代理節(jié)點(diǎn)用于管理該節(jié)點(diǎn)及其下屬所有子節(jié)點(diǎn)，這些子節(jié)點(diǎn)包括不同類型的資源類型，并組成監(jiān)控域；節(jié)點(diǎn)代理，以守護(hù)進(jìn)程的方式運(yùn)行在云平臺中的每個節(jié)點(diǎn)上，用于從監(jiān)控代理節(jié)點(diǎn)接收命令或者根據(jù)自身的設(shè)置進(jìn)行本地監(jiān)控信息的收集，節(jié)點(diǎn)代理與監(jiān)控代理節(jié)點(diǎn)通過Java遠(yuǎn)程方法調(diào)用(RMI)進(jìn)行通信。

ClusterProbe的最大優(yōu)點(diǎn)就是提出了開放式節(jié)點(diǎn)守護(hù)進(jìn)程的概念，并且通過Java?RMI實(shí)現(xiàn)功能的增減。這樣，使得各個節(jié)點(diǎn)上的守護(hù)進(jìn)程更加輕量級，也降低了監(jiān)控系統(tǒng)對集群本身造成的壓力。但是，ClusterProbe也存在一些不足之處，比如：系統(tǒng)使用Java?RMI來實(shí)現(xiàn)遠(yuǎn)程方法調(diào)用，實(shí)現(xiàn)較復(fù)雜，當(dāng)監(jiān)控代理節(jié)點(diǎn)過多時，容易造成系統(tǒng)結(jié)構(gòu)復(fù)雜，存在出現(xiàn)問題不易排查的缺陷。

根據(jù)上面的分析可知，現(xiàn)有監(jiān)控系統(tǒng)通用的架構(gòu)是代理+服務(wù)器的方式。其中，Agent用于收集監(jiān)控資源的狀態(tài)信息，server利用這些狀態(tài)信息。Agent與server之間采用，在拉模式中，發(fā)起者是server，它采用輪詢的方式從agent“拉”信息。拉模式實(shí)現(xiàn)相對簡單，但會消耗較多的資源，實(shí)時性也較差。因此，拉模式適用于周期性詢問的場景，但是，如果輪詢周期較長，會降低資源的消耗，但可能丟失狀態(tài)信息；如果輪詢周期較短，則對系統(tǒng)性能影響較大。

現(xiàn)有監(jiān)控系統(tǒng)往往需要安裝agent來收集數(shù)據(jù)，并將數(shù)據(jù)傳輸?shù)絪erver上，以實(shí)現(xiàn)監(jiān)控。這種監(jiān)控方式會降低被監(jiān)控系統(tǒng)性能，且監(jiān)控?cái)?shù)據(jù)容量越大，效率越低；同時，由于各個被監(jiān)控系統(tǒng)使用的數(shù)據(jù)格式不統(tǒng)一，導(dǎo)致agent植入代碼困難，而且由于需要創(chuàng)建監(jiān)控節(jié)點(diǎn)，增大了系統(tǒng)的使用復(fù)雜度。

發(fā)明內(nèi)容

為了解決上述技術(shù)問題，本發(fā)明提供了一種資源監(jiān)控方法及系統(tǒng)，無需在系統(tǒng)中植入代碼，能夠降低監(jiān)控的復(fù)雜度，且減少對系統(tǒng)運(yùn)行性能的影響。

為了達(dá)到本發(fā)明目的，本發(fā)明提供了一種資源監(jiān)控方法，包括：收集云計(jì)算平臺中各個節(jié)點(diǎn)產(chǎn)生的日志數(shù)據(jù)；

匹配收集到的日志數(shù)據(jù)和預(yù)先設(shè)置的異常事件策略，如果匹配成功，則產(chǎn)生異常事件；

監(jiān)聽異常事件并進(jìn)行告警。

所述收集云計(jì)算平臺中各個節(jié)點(diǎn)產(chǎn)生的日志數(shù)據(jù)包括：將日志系統(tǒng)產(chǎn)生的日志數(shù)據(jù)推送至監(jiān)控容器。

所述匹配收集到的日志數(shù)據(jù)和預(yù)先設(shè)置的異常事件策略庫之前，該方法還包括：對所述對收集到的日志數(shù)據(jù)進(jìn)行過濾。

所述匹配采用Java中的Java事件處理機(jī)制實(shí)現(xiàn)。

利用所述Java中的事件處理機(jī)制中包括的監(jiān)聽功能實(shí)現(xiàn)所述監(jiān)聽異常事件并進(jìn)行告警。