[發明專利]一種數據監控方法與監控平臺

在審

• 申請號: 201910971650.3
• 申請日: 2019-10-14
• 公開（公告）號: CN110825581A
• 公開（公告）日: 2020-02-21
• 發明（設計）人: 何凱彬
• 申請（專利權）人: 廣州力摯網絡科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F16/27;G06F16/25
• 代理公司: 東莞市說文知識產權代理事務所(普通合伙) 44330
• 代理人: 程修華

1.一種數據監控方法，其特征在于，應用于監控平臺，所述監控平臺與多個業務端通信連接，且所述監控平臺包括數據存儲層，所述數據存儲層包括Hbase以及OpenTSDB，所述方法包括：

接收到所述業務端發送的數據時，將所述數據存儲至所述Hbase；

周期性地利用OpenTSDB對所述Hbase中存儲的目標業務端的數據進行的調用，并對調用的數據進行排序與整合處理；

將處理后的數據發送至所述目標業務端。

2.如權利要求1所述的數據監控方法，其特征在于，所述數據存儲層還包括HDFS，所述將所述數據存儲至所述Hbase的步驟包括：

利用所述HDFS所述數據分類存儲至所述Hbase中；

在所述將所述數據存儲至所述Hbase的步驟之后，所述方法還包括：

利用所述OpenTSDB按預設定的時間周期對所述Hbase中存儲的數據進行壓縮。

3.如權利要求2所述的數據監控方法，其特征在于，所述Hbase的存儲空間包括多行與多列，所述利用所述HDFS按預設定的時間周期對所述Hbase中存儲的數據進行壓縮的步驟之前，所述方法包括：

將所述數據按不同列存儲至所述Hbase；

所述利用所述OpenTSDB按預設定的時間周期對所述Hbase中存儲的數據進行壓縮的步驟包括：

當經過一個時間周期時，利用OpenTSDB將所述時間周期內所有列的數據進行壓縮，并組成一行數據。

4.如權利要求1所述的數據監控方法，其特征在于，在所述接收到所述業務端發送的數據的步驟之后，所述方法還包括：

通過預設定的規則對所述數據進行篩選，當所述數據不滿足所述預設定的規則時，生成告警信息并輸出。

5.如權利要求4所述的數據監控方法，其特征在于，所述通過預設定的規則對所述數據進行篩選，當所述數據不滿足所述預設定的規則時，生成告警信息并輸出的步驟包括：

將所述數據與預設定的閾值進行比較，當所述數據的值大于所述閾值時，生成告警信息并輸出。

6.如權利要求1所述的數據監控方法，其特征在于，在所述將處理后的數據發送至所述目標業務端的步驟之前，所述方法還包括：

當接收到多個業務端發送的數據處理指令時，按消息隊列解耦對所述多個業務端發送的數據處理指令進行處理。

7.一種監控平臺，其特征在于，所述監控平臺與多個業務端通信連接，且所述監控平臺包括數據收發層與數據存儲層，所述數據存儲層包括Hbase組件以及OpenTSDB組件；

所述數據收發層用于接收所述業務端發送的數據；

所述Hbase組件用于存儲所述數據；

所述OpenTSDB組件用于對所述Hbase組件中存儲的目標業務端的數據進行的調用，并對調用的數據進行排序與整合處理；

所述數據收發層還用于將處理后的數據發送至所述目標業務端。

8.如權利要求7所述的監控平臺，其特征在于，數據存儲層還包括HDFS組件；

所述HDFS組件用于將所述數據分類存儲至所述Hbase中；

所述HDFS還用于按預設定的時間周期對所述Hbase中存儲的數據進行壓縮。

9.如權利要求8所述的監控平臺，其特征在于，

所述HDFS組件用于將所述時間周期內所有列的數據進行壓縮，并組成一行數據。

10.如權利要求7所述的監控平臺，其特征在于，所述數據收發層用于接收接口數據、文本日志數據、爬蟲數據以及業務端及其性能數據。