[發(fā)明專利]一種集群性能的評估方法和裝置

有效

• 申請?zhí)枺?/td>: 201810425538.5
• 申請日: 2018-05-07
• 公開（公告）號: CN108874640B
• 公開（公告）日: 2022-09-30
• 發(fā)明（設計）人: 吳怡燃
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;張效榮

1.一種集群性能的評估方法，其特征在于，包括：

獲取集群的服務信息和集群中各個節(jié)點的物理資源使用信息，所述服務信息包括：服務本身的健康信息、服務的物理資源使用量信息、服務的處理能力信息；

基于所述集群的服務信息、集群中各個節(jié)點的物理資源使用信息和預設的評價規(guī)則，實時計算得到集群的評價指標信息；所述評價規(guī)則包括：集群的評價指標以及評價指標對應的權值，所述集群的評價指標包括：整集群級別Container吞吐量、作業(yè)運行吞吐量、作業(yè)失敗率、整集群文件訪問頻率、整集群文件修改頻率、單個作業(yè)文件訪問頻率、單個作業(yè)創(chuàng)建文件數、單個作業(yè)Container平均運行時間、單個節(jié)點Container吞吐量、單個節(jié)點事件處理量；

將集群的各個評價指標信息進行加權求和，確定所述集群的性能健康度；

所述方法還包括：根據節(jié)點的物理資源使用信息和集群的服務信息，確定節(jié)點的主成分占比；若節(jié)點的主成分占比，不在預設范圍內，則確定該節(jié)點為差異性節(jié)點；所述節(jié)點的主成分占比為單位時間內節(jié)點處理的事件量占整個集群事件的比例；

根據節(jié)點的主成分占比，計算集群中各節(jié)點的主成分占比的均方差；若所述均方差超過設定閾值，則所述集群為異常集群。

2.根據權利要求1所述的方法，其特征在于，所述集群的性能健康度采用以下方式確定：

其中，H表示集群的性能健康度，f(i)表示集群的第i個評價指標信息，w表示評價指標對應的權值，n表示集群的評價指標的數量。

3.根據權利要求1所述的方法，其特征在于，確定該節(jié)點為差異性節(jié)點之后，所述方法還包括：

根據所述差異性節(jié)點及其主成分占比，確定該差異性節(jié)點的問題；

根據所述問題，從預先設置的規(guī)則庫中獲取與所述問題對應的答案或優(yōu)化方式。

4.一種集群性能的評估裝置，其特征在于，包括：獲取模塊、分析模塊和評價模塊；

所述獲取模塊，用于：獲取集群的服務信息和集群中各個節(jié)點的物理資源使用信息，所述服務信息包括：服務本身的健康信息、服務的物理資源使用量信息、服務的處理能力信息；

所述分析模塊，用于：基于所述集群的服務信息、集群中各個節(jié)點的物理資源使用信息和預設的評價規(guī)則，實時計算得到集群的評價指標信息；所述評價規(guī)則包括：集群的評價指標以及評價指標對應的權值，所述集群的評價指標包括：整集群級別Container吞吐量、作業(yè)運行吞吐量、作業(yè)失敗率、整集群文件訪問頻率、整集群文件修改頻率、單個作業(yè)文件訪問頻率、單個作業(yè)創(chuàng)建文件數、單個作業(yè)Container平均運行時間、單個節(jié)點Container吞吐量、單個節(jié)點事件處理量；

所述分析模塊，還用于：根據節(jié)點的物理資源使用信息和集群的服務信息，確定節(jié)點的主成分占比；若節(jié)點的主成分占比，不在預設范圍內，則確定該節(jié)點為差異性節(jié)點；所述節(jié)點的主成分占比為單位時間內節(jié)點處理的事件量占整個集群事件的比例；

根據節(jié)點的主成分占比，計算集群中各節(jié)點的主成分占比的均方差；若所述均方差超過設定閾值，則所述集群為異常集群；

所述評價模塊，用于：將集群的各個評價指標信息進行加權求和，確定所述集群的性能健康度。

5.根據權利要求4所述的裝置，其特征在于，所述評價模塊，用于采用以下方式確定集群的性能健康度：

其中，H表示集群的性能健康度，f(i)表示集群的第i個評價指標信息，w表示評價指標對應的權值，n表示集群的評價指標的數量。

6.根據權利要求4所述的裝置，其特征在于，所述分析模塊，還用于：

根據所述差異性節(jié)點及其主成分占比，確定該差異性節(jié)點的問題；

根據所述問題，從預先設置的規(guī)則庫中獲取與所述問題對應的答案或優(yōu)化方式。

7.一種電子設備，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當所述一個或多個程序被所述一個或多個處理器執(zhí)行，使得所述一個或多個處理器實現如權利要求1-3中任一所述的方法。

8.一種計算機可讀介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執(zhí)行時實現如權利要求1-3中任一所述的方法。