[發(fā)明專利]一種多集群運(yùn)行監(jiān)控方法、裝置、系統(tǒng)及可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011532906.X
• 申請(qǐng)日: 2020-12-22
• 公開（公告）號(hào): CN112667465A
• 公開（公告）日: 2021-04-16
• 發(fā)明（設(shè)計(jì)）人: 武鵬
• 申請(qǐng)（專利權(quán)）人: 北京浪潮數(shù)據(jù)技術(shù)有限公司
• 主分類號(hào): G06F11/30
• 分類號(hào): G06F11/30;G06F11/32
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 張春輝

本發(fā)明公開了一種多集群運(yùn)行監(jiān)控方法，該方法由監(jiān)控平臺(tái)服務(wù)器接收各集群的監(jiān)控?cái)?shù)據(jù)，將監(jiān)控系統(tǒng)由1個(gè)集群1套改為多個(gè)集群共用1套，在監(jiān)控平臺(tái)中可以根據(jù)設(shè)定的監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)從接收到的多集群監(jiān)控?cái)?shù)據(jù)中根據(jù)監(jiān)控指標(biāo)項(xiàng)進(jìn)行相應(yīng)的運(yùn)行統(tǒng)計(jì)，從而實(shí)現(xiàn)了多集群多服務(wù)實(shí)例的數(shù)據(jù)統(tǒng)計(jì)，統(tǒng)計(jì)后存儲(chǔ)數(shù)據(jù)，以便于后續(xù)對(duì)于多集群運(yùn)行狀態(tài)的查看。發(fā)明還公開的多集群運(yùn)行監(jiān)控裝置系統(tǒng)中通過服務(wù)組件指標(biāo)池以及主機(jī)指標(biāo)監(jiān)視器進(jìn)行監(jiān)控?cái)?shù)據(jù)的采集，并傳輸至監(jiān)控平臺(tái)服務(wù)器中的監(jiān)控指標(biāo)收集器，通過監(jiān)控指標(biāo)收集器完成多集群監(jiān)控?cái)?shù)據(jù)的存儲(chǔ)、統(tǒng)計(jì)、接口查詢，通過指標(biāo)統(tǒng)計(jì)器和指標(biāo)管控臺(tái)配合使用完成監(jiān)控實(shí)時(shí)數(shù)據(jù)的多維度統(tǒng)計(jì)。

技術(shù)領(lǐng)域

本發(fā)明涉及集群管理技術(shù)領(lǐng)域，特別是涉及一種多集群運(yùn)行監(jiān)控方法、裝置、系統(tǒng)及可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

Ambari作為一款針對(duì)大數(shù)據(jù)平臺(tái)的運(yùn)維管理工具，提供了集群的創(chuàng)建、管理、監(jiān)控以及升級(jí)等多項(xiàng)功能，目前在業(yè)界已經(jīng)得到廣泛使用。其中，Ambari指標(biāo)系統(tǒng)(AmbariMetrics System，可以簡(jiǎn)稱為AMS)主要負(fù)責(zé)監(jiān)控平臺(tái)各類服務(wù)及主機(jī)的運(yùn)行情況，提供各類服務(wù)及主機(jī)的相關(guān)指標(biāo)，從而達(dá)到判斷集群健康情況的目的。

Ambari現(xiàn)有的資源監(jiān)控體系完全支持單集群運(yùn)行時(shí)的監(jiān)控，對(duì)多集群運(yùn)行時(shí)的監(jiān)控不夠完善，現(xiàn)有的監(jiān)控架構(gòu)也不太適合多集群的場(chǎng)景。但是隨著集群規(guī)模越來越大，待管理的集群數(shù)量也越來越多，目前的資源監(jiān)控體系難以滿足多集群管理的應(yīng)用需求。

綜上所述，如何同時(shí)實(shí)現(xiàn)對(duì)于多集群的運(yùn)行監(jiān)控，是目前本領(lǐng)域技術(shù)人員急需解決的技術(shù)問題。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種多集群運(yùn)行監(jiān)控方法、裝置、系統(tǒng)及可讀存儲(chǔ)介質(zhì)，可以同時(shí)實(shí)現(xiàn)對(duì)于多集群的運(yùn)行監(jiān)控。

為解決上述技術(shù)問題，本發(fā)明提供如下技術(shù)方案：

一種多集群運(yùn)行監(jiān)控方法，包括：

監(jiān)控平臺(tái)服務(wù)器接收各集群的監(jiān)控?cái)?shù)據(jù)；其中，所述監(jiān)控?cái)?shù)據(jù)包括：集群中各主機(jī)的監(jiān)控指標(biāo)數(shù)據(jù)，以及集群中各服務(wù)組件的監(jiān)控指標(biāo)數(shù)據(jù)；

確定監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)；

根據(jù)所述監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)從所述監(jiān)控?cái)?shù)據(jù)中確定對(duì)應(yīng)的數(shù)據(jù)，并對(duì)所述數(shù)據(jù)進(jìn)行監(jiān)控指標(biāo)統(tǒng)計(jì)，得到運(yùn)行統(tǒng)計(jì)數(shù)據(jù)；

存儲(chǔ)所述監(jiān)控?cái)?shù)據(jù)以及所述運(yùn)行統(tǒng)計(jì)數(shù)據(jù)，以便多集群運(yùn)行狀態(tài)的查看。

可選地，所述確定監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)，包括：

接收用戶從預(yù)設(shè)多個(gè)可選統(tǒng)計(jì)維度中指定的統(tǒng)計(jì)維度，作為目標(biāo)統(tǒng)計(jì)維度；

根據(jù)所述目標(biāo)統(tǒng)計(jì)維度生成多集群統(tǒng)計(jì)任務(wù)，作為所述監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)。

可選地，所述目標(biāo)統(tǒng)計(jì)維度包括：監(jiān)控指標(biāo)、主機(jī)、集群、服務(wù)組件實(shí)例、運(yùn)行時(shí)間、統(tǒng)計(jì)間隔中的一種或多種。

可選地，根據(jù)所述目標(biāo)統(tǒng)計(jì)維度生成多集群統(tǒng)計(jì)任務(wù)，作為所述監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)，包括：

調(diào)用QUARTZ指標(biāo)統(tǒng)計(jì)器根據(jù)所述目標(biāo)統(tǒng)計(jì)維度生成多集群統(tǒng)計(jì)任務(wù)，并將所述QUARTZ指標(biāo)統(tǒng)計(jì)器輸出的統(tǒng)計(jì)任務(wù)作為所述監(jiān)控指標(biāo)統(tǒng)計(jì)任務(wù)。

可選地，存儲(chǔ)所述監(jiān)控?cái)?shù)據(jù)以及所述運(yùn)行統(tǒng)計(jì)數(shù)據(jù)，包括：

將所述監(jiān)控?cái)?shù)據(jù)以及所述運(yùn)行統(tǒng)計(jì)數(shù)據(jù)存儲(chǔ)至監(jiān)控指標(biāo)分布式存儲(chǔ)組件中。

可選地，所述的多集群運(yùn)行監(jiān)控方法還包括：

通過分布式存儲(chǔ)操作接口接收用戶的數(shù)據(jù)讀取請(qǐng)求；

根據(jù)所述數(shù)據(jù)讀取請(qǐng)求從所述監(jiān)控指標(biāo)分布式存儲(chǔ)單元中提取對(duì)應(yīng)的目標(biāo)數(shù)據(jù)；

輸出所述目標(biāo)數(shù)據(jù)。