[發明專利]一種基于時間的yarn任務資源動態調度方法在審
| 申請號: | 201410819147.3 | 申請日: | 2014-12-25 |
| 公開(公告)號: | CN104407921A | 公開(公告)日: | 2015-03-11 |
| 發明(設計)人: | 楊勇;亓開元;辛國茂;盧軍佐 | 申請(專利權)人: | 浪潮電子信息產業股份有限公司 |
| 主分類號: | G06F9/46 | 分類號: | G06F9/46 |
| 代理公司: | 濟南信達專利事務所有限公司 37100 | 代理人: | 姜明 |
| 地址: | 250101 山東*** | 國省代碼: | 山東;37 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 基于 時間 yarn 任務 資源 動態 調度 方法 | ||
1.一種基于時間的yarn任務資源動態調度方法,其特征在于,其具體實現過程為:
設計yarn隊列,根據任務特點,設計多個隊列,每個隊列對應一類任務,隊列的數量動態增加,同時同一層級所有隊列的資源分配比例之和是100%;
編寫定時刷新隊列的腳本,根據時間變化和業務需求,定時調用yarn控制臺命令,刷新yarn任務隊列的配置參數;
提交任務到指定隊列,提交任務到yarn框架上時,指定任務提交到哪個隊列上,從而保證各個任務在指定隊列上運行。
2.根據權利要求1所述的一種基于時間的yarn任務資源動態調度方法,其特征在于,所述定時任務腳本編寫完成后,在指定時間將對應方案的配置文件復制到$YARN_HOME/conf目錄下,并調用yarn控制臺命令yarn?rmadmin?–refreshQueues?刷新配置文件。
3.根據權利要求1所述的一種基于時間的yarn任務資源動態調度方法,其特征在于,提交yarn任務時,配置yarn框架提供的環境變量,即mapreduce.job.queuename來指定任務要提交到哪個隊列上。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于浪潮電子信息產業股份有限公司,未經浪潮電子信息產業股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201410819147.3/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種異步批處理調度方法及系統
- 下一篇:一種定制安裝計算機軟件的系統及方法





