[發(fā)明專利]資源推薦方法、裝置、電子設備及機器可讀存儲介質有效
| 申請?zhí)枺?/td> | 202011446780.4 | 申請日: | 2020-12-08 |
| 公開(公告)號: | CN112559859B | 公開(公告)日: | 2023-06-30 |
| 發(fā)明(設計)人: | 葉鏗 | 申請(專利權)人: | 杭州海康威視系統(tǒng)技術有限公司 |
| 主分類號: | G06F16/9535 | 分類號: | G06F16/9535;G06F16/9536;G06N3/0464;G06N3/047;G06N3/084;G06Q50/00 |
| 代理公司: | 北京博思佳知識產權代理有限公司 11415 | 代理人: | 楊春香 |
| 地址: | 310051 浙江省杭州*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 資源 推薦 方法 裝置 電子設備 機器 可讀 存儲 介質 | ||
本申請?zhí)峁┮环N資源推薦方法、裝置、電子設備及機器可讀存儲介質,該方法包括:獲取任務提交信息;確定所述目標數據量是否處于預先構建的數據集的范圍內;若所述目標數據量處于所述預先構建的數據集的范圍內,依據期望最大運行時長、所述目標數據量以及所述預先構建的數據集進行資源推薦。該方法可以實現資源自動配置,提高資源推薦的合理性和資源配置的效率,優(yōu)化資源利用率。
技術領域
本申請涉及人工智能及大數據技術領域,尤其涉及一種資源推薦方法、裝置、電子設備及機器可讀存儲介質。
背景技術
YARN(Yet?Another?Resource?Negotiator,另一種資源協(xié)調者)是一種新的Hadoop資源管理器,它是一個通用資源管理系統(tǒng),可為上層應用提供統(tǒng)一的資源管理和調度,它的引入為集群在利用率、資源統(tǒng)一管理和數據共享等方面帶來了巨大好處。
YARN平臺上的container(容器)能夠使用的內存資源是由用戶提交應用程序的時候設置的,而用戶設置使用的內存資源要求客戶具有較豐富的經驗,且容易出現設置不合理的情況,若內存資源設置過高,容易搶占其他container的資源;若內存資源設置過低,可能會導致任務運行時長過長。
如何合理地配置YRAN系統(tǒng)中任務運行使用的資源值成為一個亟待解決的技術問題。
發(fā)明內容
有鑒于此,本申請?zhí)峁┮环N資源推薦方法、裝置、電子設備及機器可讀存儲介質。
根據本申請實施例的第一方面,提供一種資源推薦方法,包括:
獲取任務提交信息,該任務提交信息包括期望最大運行時長以及需要運行的目標數據量;
確定目標數據量是否處于預先構建的數據集的范圍內;其中,該預先構建的數據集包括多條任務運行數據,該任務運行數據包括數據量、資源值以及運行時長的對應關系;
若目標數據量處于預先構建的數據集的范圍內,依據期望最大運行時長、目標數據量以及預先構建的數據集進行資源推薦。
根據本申請實施例的第二方面,提供一種資源推薦裝置,包括:
獲取單元,被配置為獲取任務提交信息,該任務提交信息包括期望最大運行時長以及需要運行的目標數據量;
確定單元,被配置為確定目標數據量是否處于預先構建的數據集的范圍內;其中,該預先構建的數據集包括多條任務運行數據,該任務運行數據包括數據量、資源值以及運行時長的對應關系;
資源推薦單元,被配置為若目標數據量處于預先構建的數據集的范圍內,依據期望最大運行時長、目標數據量以及預先構建的數據集進行資源推薦。
根據本申請實施例的第三方面,提供一種電子設備,包括處理器、通信接口、存儲器和通信總線,其中,處理器,通信接口,存儲器通過通信總線完成相互間的通信;
存儲器,用于存放計算機程序;
處理器,用于執(zhí)行存儲器上所存放的程序時,實現第一方面的資源推薦方法。
根據本申請實施例的第四方面,提供一種計算機可讀存儲介質,計算機可讀存儲介質內存儲有計算機程序,計算機程序被處理器執(zhí)行時實現第一方面的資源推薦方法。
根據本申請實施例的第五方面,提供一種計算機程序,該計算機程序存儲于機器可讀存儲介質,并且當處理器執(zhí)行該計算機程序時,促使處理器執(zhí)行第一方面的資源推薦方法。
本申請實施例的資源推薦方法,獲取任務提交信息,確定任務提交信息中包括的目標數據量是否處于預先構建的數據集的范圍內,若目標數據量處于預先構建的數據集的范圍內,依據任務提交信息中包括的期望最大運行時長、目標數據量以及預先構建的數據集進行資源推薦,實現了資源自動配置,提高了資源推薦的合理性和資源配置的效率,優(yōu)化了資源利用率。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于杭州海康威視系統(tǒng)技術有限公司,未經杭州海康威視系統(tǒng)技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業(yè)授權和技術合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011446780.4/2.html,轉載請聲明來源鉆瓜專利網。





