[發明專利]一種面向大數據應用的云計算資源調度方法在審
| 申請號: | 201711437160.2 | 申請日: | 2017-12-26 |
| 公開(公告)號: | CN108170532A | 公開(公告)日: | 2018-06-15 |
| 發明(設計)人: | 周紅衛;周博;吳昊;張曉洲;王鐘沛 | 申請(專利權)人: | 江蘇潤和軟件股份有限公司 |
| 主分類號: | G06F9/50 | 分類號: | G06F9/50 |
| 代理公司: | 暫無信息 | 代理人: | 暫無信息 |
| 地址: | 210012 江*** | 國省代碼: | 江蘇;32 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 離線訓練 云計算資源 大數據 批處理 調度 大規模數據 成本效益 動態規劃 關鍵特征 基礎數據 日志分析 數據規模 貪心算法 資源規劃 作業分配 作業集中 離線 應用 抽取 三維 抽象 反饋 學習 | ||
1.方法特征在于實現步驟如下:
第一步,離線學習:首先將所需要處理的每個作業提交到系統,系統將自動分配一定的資源給該作業,資源會在不同類型的集群上以不同的規模進行分配;對于批處理作業,離線模塊會將作業放到不同類型的集群中同時選擇不同的集群規模進行多次處理;
第二步,資源規劃:得到作業集中每個作業的完成時間哈希表,此時,每個作業的具體資源分配問題就歸結為在給定總資源的前提下如何為每個作業進行資源分配使得該作業集在該給定資源上全局完成時間最短;
第三步,反饋調整:學習并調整底層作業完成時間預測基礎數據,對于處理完的作業集產生的新的用于時間預測的數據,反饋控制器將調整數據庫中的對應數據使得系統得到及時地更新,使用EWMA作為基礎進行數據調整。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于江蘇潤和軟件股份有限公司,未經江蘇潤和軟件股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201711437160.2/1.html,轉載請聲明來源鉆瓜專利網。





