[發明專利]一種監控系統的多維度數據存儲、檢索方法及裝置

有效

• 申請號: 201310340860.5
• 申請日: 2013-08-07
• 公開（公告）號: CN103412916A
• 公開（公告）日: 2013-11-27
• 發明（設計）人: 文星
• 申請（專利權）人: 北京京東尚科信息技術有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京邦信陽專利商標代理有限公司 11012
• 代理人: 王昭林;金璽

技術領域

本發明涉及數據監控相關技術領域，特別是一種監控系統的多維度數據存儲、檢索方法及裝置。

背景技術

監控數據的存儲與展示一直是監控系統的關鍵，對于需要監控的系統進行數據采集的頻率越大，采集的數據量就越大，隨著采集的時間增長，會造成數據存儲慢，檢索慢的問題，如果采集的頻率過小，那么采集的數據量是降低了，但是不利于系統的實時健康狀況的有效監控，對于重要的IT系統（7*24小時不能中斷的系統），后臺監控的重要性是不言而喻的，所以對于監控數據的存儲，檢索（用于報表展示，歷史統計，對比）的可靠方案設計是要求很高的。

對于監控數據的存儲、檢索，現有的技術方案通常利用普通的數據庫存儲，大致采用以下方法：

（1）SQL數據庫存儲檢索：主要由數據存儲模塊、數據查詢模塊組成、過期數據刪除模塊。

A、數據存儲模塊：后臺采集異步批量存儲來提高數據存儲速度。

B、數據查詢模塊：采用標準sql來進行數據查詢。

C、過期數據刪除模塊：為了避免數據量過大導致查詢速度慢，必須定期刪除某一時間點之前的數據，比如一個月之前的數據。

然而，現有技術監控的監控維度通常會受設計的表結構限制(根據業務設計表結構)，新增加的監控數據往往只能通過修改程序代碼的方式來實現，增加了維護的成本,限制了可擴展性。

發明內容

基于此，有必要針對現有監控系統數據存儲的監控維度固定，不能根據不同的監控業務動態調整的技術問題，提出一種監控系統的多維度數據存儲、檢索方法及裝置。

一種監控系統的多維度數據存儲方法，包括：

獲取與每個監控業務關聯的多個監控維度，以及至少一對包括指標名稱和指標值的監控指標數據；

將多個監控維度分別轉換為具有相同長度的多個行關鍵字映射值；

將監控時間與多個行關鍵字映射值結合作為行關鍵字，且所述監控時間設置在行關鍵字中的固定的時間位置；

以所述行關鍵字為索引在分布式數據庫中存儲監控指標。

一種監控系統的多維度數據存儲裝置，包括：

指標獲取模塊，用于獲取與每個監控業務關聯的多個監控維度，以及至少一對包括指標名稱和指標值的監控指標數據；

映射值獲取模塊，用于將多個監控維度分別轉換為具有相同長度的多個行關鍵字映射值；

行關鍵字生成模塊，用于將監控時間與多個行關鍵字映射值結合作為行關鍵字，且所述監控時間設置在行關鍵字中的固定的時間位置；

存儲模塊，用于以所述行關鍵字為索引在分布式數據庫中存儲監控指標。

一種監控系統的多維度數據檢索方法，包括：

響應檢索請求，所述檢索請求包括多個待檢索監控維度以及待檢索時間范圍，將多個待檢索監控維度轉換為具有相同長度的多個待檢索映射值；

檢索符合檢索請求的行關鍵字，所述行關鍵字包括多個具有相同長度的行關鍵字映射值，以及設置在行關鍵字固定的時間位置的監控時間，所述符合檢索請求的行關鍵字具體包括：

從行關鍵字固定的時間位置拆分出的監控時間，且拆分出的監控時間在所述待檢索時間范圍內，且

從行關鍵字中拆分出的多個行關鍵字映射值，且拆分出的行關鍵字包括所述多個待檢索映射值；

獲取以符合檢索請求的行關鍵字為索引存儲的至少一對包括指標名稱和指標值的監控指標數據。

一種監控系統的多維度數據檢索裝置，包括：

檢索請求響應模塊，用于響應檢索請求，所述檢索請求包括多個待檢索監控維度以及待檢索時間范圍，將多個待檢索監控維度轉換為具有相同長度的多個待檢索映射值；

行關鍵字檢索模塊，用于檢索符合檢索請求的行關鍵字，所述行關鍵字包括多個具有相同長度的行關鍵字映射值，以及設置在行關鍵字固定的時間位置的監控時間，所述符合檢索請求的行關鍵字具體包括：

從行關鍵字固定的時間位置拆分出的監控時間，且拆分出的監控時間在所述待檢索時間范圍內，且

從行關鍵字中拆分出的多個行關鍵字映射值，且拆分出的行關鍵字包括所述多個待檢索映射值；

指標數據獲取模塊，用于獲取以符合檢索請求的行關鍵字為索引存儲的至少一對包括指標名稱和指標值的監控指標數據。