[發明專利]基于YARN的資源監控方法、裝置及終端設備

在審

• 申請號: 202010120079.7
• 申請日: 2020-02-26
• 公開（公告）號: CN111290917A
• 公開（公告）日: 2020-06-16
• 發明（設計）人: 程飛
• 申請（專利權）人: 深圳市云智融科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F9/50;G06F9/48
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 羅琳麗

1.一種基于YARN的資源監控方法，其特征在于，包括：

在目標時間段內，每隔第一預設時長通過YARN接口獲取每個執行中的目標任務的運行狀態信息，所述運行狀態信息包括運行時長及運行所占資源大小；

若檢測到所述目標任務中存在異常任務，則終止所述異常任務，其中所述異常任務為運行時長超過運行時長閾值和/或運行所占資源大小超過預設資源閾值的任務。

2.如權利要求1所述的基于YARN的資源監控方法，其特征在于，所述目標任務具體為任務白名單以外的任務，在所述在目標時間段內，每隔預設時長通過YARN接口獲取每個執行中的目標任務的運行狀態信息之前，還包括：

設置任務白名單。

3.如權利要求1所述的基于YARN的資源監控方法，其特征在于，在所述在目標時間段內，每隔第一預設時長通過YARN接口獲取每個執行中的目標任務的運行狀態信息之前，還包括：

接收設置指令，根據所述設置指令設置目標時間段和第一預設時長，以及，根據所述設置指令設置運行時長閾值和/或預設資源閾值。

4.如權利要求1所述的基于YARN的資源監控方法，其特征在于，在所述若檢測到所述目標任務中存在異常任務，則終止所述異常任務之后，還包括：

將所述異常任務的信息存儲至待處理列表中；

在非目標時間段內，執行所述待處理列表中的任務。

5.如權利要求1所述的基于YARN的資源監控方法，其特征在于，所述方法還包括：

若檢測到執行結束的任務，則將所述執行結束的任務的運行日志信息存儲至任務運行日志數據庫，所述運行日志信息至少包括所述執行結束的任務的運行起始時間信息、運行總時長及資源使用信息，所述執行結束的任務包括運行完畢的任務及被終止的異常任務。

6.如權利要求5所述的基于YARN的資源監控方法，其特征在于，所述方法還包括：

每隔第二預設時長，根據所述任務運行日志數據庫中的運行日志信息，調整所述運行時長閾值和/或所述預設資源閾值的大小。

7.如權利要求5所述的基于YARN的資源監控方法，其特征在于，所述方法還包括：

每隔第三預設時長，統計所述任務運行日志數據庫中所述執行結束的任務的運行起始時間信息，調整所述目標時間段。

8.一種基于YARN的資源監控裝置，其特征在于，包括：

運行狀態信息獲取單元，用于在目標時間段內，每隔第一預設時長通過YARN接口獲取每個執行中的目標任務的運行狀態信息，所述運行狀態信息包括運行時長及運行所占資源大小；

異常任務終止單元，用于若檢測到所述目標任務中存在異常任務，則終止所述異常任務，其中所述異常任務為運行時長超過運行時長閾值和/或運行所占資源大小超過預設資源閾值的任務。

9.一種終端設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，其特征在于，當所述處理器執行所述計算機程序時，使得終端設備實現如權利要求1至7任一項所述方法的步驟。

10.一種計算機可讀存儲介質，所述計算機可讀存儲介質存儲有計算機程序，其特征在于，當所述計算機程序被處理器執行時，使得終端設備實現如權利要求1至7任一項所述方法的步驟。