[發明專利]一種監控指標數據的可視化查詢及多維度疊加分析的方法

在審

• 申請號: 201711259739.4
• 申請日: 2017-12-04
• 公開（公告）號: CN107948016A
• 公開（公告）日: 2018-04-20
• 發明（設計）人: 李森;史亞風
• 申請（專利權）人: 科大國創軟件股份有限公司
• 主分類號: H04L12/26
• 分類號: H04L12/26;H04L29/08;G06F17/30
• 代理公司: 北京雙收知識產權代理有限公司11241
• 代理人: 樓湖斌

技術領域：

本發明涉及計算機技術領域，具體講是一種基于搜索引擎實現IT系統監控指標數據的可視化查詢及多維度疊加分析的方法。

背景技術：

現有的zabbix產品存在一定的性能瓶頸，監控的機器量越大，數據的增大會使數據庫的寫入成為一定的瓶頸，zabbix官網給出的單機上限是5000臺，屆時就需要增加proxy，增加成本。Zabbix采集數據有pull方式，也就是server主動模式，當目標機器量大之后，pull任務會出現積壓，采集數據會延遲。如果要對zabbix二次開發，需要分析其MySQL表結構，MySQL表結構比較復雜，通過API開發對開發能力有要求。另外，zabbix產品的圖形展示無法做到秒級監控，且不支持多租戶，比如多租戶共有1套zabbix系統，zabbix無法實現每個用戶希望只能看到自己有關的系統的監控界面。

發明內容：

本發明要解決的技術問題是，提供一種基于搜索引擎實現IT系統監控指標數據的可視化查詢及多維度疊加分析的方法，該方法不但能夠使單機接入主機的最大數量達到7000臺，而且數據采集的方式采用的是客戶端push的方式，在主機多的情況下不會影響性能，另外，該方法還能簡化數據庫表，便于擴展，且圖形支持秒級監控，支持多租戶使用，保證每個用戶只看到自己有關的系統的監控界面。

本發明的技術解決方案是，提供一種監控指標數據的可視化查詢及多維度疊加分析的方法，該方法包括以下步驟：

步驟1﹒采集IT系統資源數據，具體實現方法是：

通過對linux命令的整合，利用shell腳本編程提取系統資源信息數據，如ip、cpu、內存、磁盤使用情況、tcp連接數、網絡延時、inode等指標，并將數據推送至Elasticsearch。

步驟2﹒存儲采集到的資源數據，具體實現方法是：

①Elasticsearch開源軟件提供rest接口，接收shell采集的數據，按周建立索引存儲，如圖2所示，索引格式為租戶名稱+年份+周數；

②使用Tomcat作為服務器訪問ElasticSearch，當用戶打開頁面時，tomcat請求ElasticSearch，獲得實時數據；

③提供rest接口供上層客戶端查詢搜索數據并進行分析。

步驟3﹒查詢數據實現多維度分析，具體實現方法是：

①基于數據實現展現、統計、告警等附加模塊，運用存儲端提供的相應API查詢數據并進行曲線實時展示，如圖3所示，對數據進行疊加分析提供可配置的告警機制；

②在tomcat中內置h2數據庫，使用租戶名稱和ip地址綁定的方式區別不同的租戶。

本發明的有益效果是：

1、單機最大可接入7000臺主機。

2、基于客戶端push的方式，主機多的情況下不會影響性能。

3、簡化數據庫表，便于擴展。

4、圖形支持秒級監控。

5、支持多租戶，每個用戶只能看到自己有關的系統的監控界面。

附圖說明：

圖1為本發明一種監控指標數據的可視化查詢及多維度疊加分析的方法的流程圖；

圖2為本發明中ElasticSearch按周建立索引的圖片；

圖3為本發明進行曲線實時展示時的頁面效果圖。

具體實施例：

下面結合附圖和具體實施例對本發明一種監控指標數據的可視化查詢及多維度疊加分析的方法作進一步說明。

如圖1所示，本發明一種監控指標數據的可視化查詢及多維度疊加分析的方法的具體步驟如下：

步驟1﹒采集IT系統資源數據，具體實現方法是：

通過對linux命令的整合，利用shell腳本編程提取系統資源信息數據，如ip、cpu、內存、磁盤使用情況、tcp連接數、網絡延時、inode等指標，并將數據推送至Elasticsearch。

步驟2﹒存儲采集到的資源數據，具體實現方法是：

①Elasticsearch開源軟件提供rest接口，接收shell采集的數據，按周建立索引存儲，如圖2所示，索引格式為租戶名稱+年份+周數；

②使用Tomcat作為服務器訪問ElasticSearch，當用戶打開頁面時，tomcat請求ElasticSearch，獲得實時數據；

③提供rest接口供上層客戶端查詢搜索數據并進行分析。

步驟3﹒查詢數據實現多維度分析，具體實現方法是：