[發明專利]一種資源配置方法、設備、裝置和計算機可讀存儲介質

有效

• 申請號: 201811051853.2
• 申請日: 2018-09-10
• 公開（公告）號: CN110888732B
• 公開（公告）日: 2023-04-25
• 發明（設計）人: 杜長斌;陳強;楊光達;尹秉政;張戈;宋剛;董新;崔小麗;王梓洋;李晉;賀麗萍;王志;劉鋼;王恒石
• 申請（專利權）人: 中國移動通信集團黑龍江有限公司;中國移動通信集團有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 姚文嫻;張穎玲

1.一種資源配置方法，其特征在于，所述方法包括：

獲取另一種資源協調者YARN的任務執行歷史數據，根據所述YARN的任務執行歷史數據，得出在YARN多種配置參數下的歷史執行結果和評價指標；

根據所述在YARN多種配置參數下的歷史執行結果和評價指標，確定YARN當前任務集的資源配置參數，其中，所述YARN當前任務集包括多個任務隊列；

確定所述YARN當前任務集的資源配置參數中需要優化的資源配置參數，包括：

確定采用蟻群算法對YARN的當前任務集的資源配置參數進行調整，或者，上次調整YARN的當前任務集的資源配置參數時，為YARN的當前任務集分配的資源未發生變化，則采用蟻群算法對YARN的當前任務集的任務隊列的權重進行調整；

上次調整YARN的當前任務集的資源配置參數時，為YARN的當前任務集分配的資源發生變化，且未更改YARN的當前任務集的任務隊列的權重，則采用蟻群算法對YARN的當前任務集的最快隊列的資源配置參數進行調整；

上次調整YARN的當前任務集的資源配置參數時，為YARN的當前任務集分配的資源發生變化，且更改YARN的當前任務集的任務隊列的權重，且為各個任務隊列分配的資源均未超過允許分配的資源的上限，則采用蟻群算法對YARN的當前任務集的最慢隊列的資源配置參數進行調整。

2.根據權利要求1所述的方法，其特征在于，所述根據所述在YARN多種配置參數下的歷史執行結果和評價指標，確定YARN當前任務集的資源配置參數，包括：

獲取YARN當前任務集的初始資源配置參數；

根據所述在YARN多種配置參數下的歷史執行結果和評價指標，采用主導資源公平DRF策略，對所述YARN當前任務集的初始資源配置參數進行調整，得到所述YARN當前任務集的資源配置參數。

3.根據權利要求2所述的方法，其特征在于，所述對所述YARN當前任務集的初始資源配置參數進行調整，得到所述YARN當前任務集的資源配置參數，包括：

對所述YARN當前任務集的初始資源配置參數進行遞歸調整，在遞歸調整后的資源配置參數達到收斂條件時，將遞歸調整后的資源配置參數確定為YARN當前任務集的資源配置參數。

4.根據權利要求3所述的方法，其特征在于，所述方法還包括：

在對所述YARN當前任務集的初始資源配置參數進行遞歸調整時，確定所述YARN當前任務集的資源配置參數中需要優化的資源配置參數，采用蟻群算法對所述需要優化的資源配置參數進行優化。

5.根據權利要求4所述的方法，其特征在于，所述采用蟻群算法對所述需要優化的資源配置參數進行優化，包括：

按照以下方式得出下一時刻YARN對應的集群負載：確定所述YARN對應的集群負載的變化趨勢；所述變化趨勢為上升趨勢時，調整預測出下一時刻相對于當前時刻YARN對應的集群負載的增加值，根據調整后的增加值，得出下一時刻YARN對應的集群負載；所述變化趨勢為下降趨勢時，調整預測出下一時刻相對于當前時刻YARN對應的集群負載的減小值，根據調整后的減小值，得出下一時刻YARN對應的集群負載；

在得出的下一時刻YARN對應的集群負載不滿足收斂條件時，重新得出下一時刻YARN對應的集群負載，直至得出的下一時刻YARN對應的集群負載滿足收斂條件；在得出的下一時刻YARN對應的集群負載滿足收斂條件時，完成對YARN當前任務集的資源配置參數的配置。