日韩在线一区二区三区,日本午夜一区二区三区,国产伦精品一区二区三区四区视频,欧美日韩在线观看视频一区二区三区 ,一区二区视频在线,国产精品18久久久久久首页狼,日本天堂在线观看视频,综合av一区

[發(fā)明專利]一種針對迭代應(yīng)用的Spark平臺資源動態(tài)分配方法及系統(tǒng)有效

專利信息
申請?zhí)枺?/td> 201710481071.1 申請日: 2017-06-22
公開(公告)號: CN107291550B 公開(公告)日: 2019-11-12
發(fā)明(設(shè)計)人: 王芳;馮丹;李源 申請(專利權(quán))人: 華中科技大學(xué)
主分類號: G06F9/50 分類號: G06F9/50
代理公司: 華中科技大學(xué)專利中心 42201 代理人: 廖盈春;李智
地址: 430074 湖北*** 國省代碼: 湖北;42
權(quán)利要求書: 查看更多 說明書: 查看更多
摘要:
搜索關(guān)鍵詞: 一種 針對 應(yīng)用 spark 平臺 資源 動態(tài)分配 方法 系統(tǒng)
【權(quán)利要求書】:

1.一種針對迭代應(yīng)用的Spark平臺資源動態(tài)分配方法,其特征在于,包括:

根據(jù)Spark集群的硬件信息為Spark集群的任務(wù)執(zhí)行單元分配第一資源以用于任務(wù)執(zhí)行單元執(zhí)行迭代應(yīng)用,所述Spark集群包括至少一個計算節(jié)點(diǎn),每個計算節(jié)點(diǎn)上啟動至少一個任務(wù)執(zhí)行單元,所述硬件信息包括每個計算節(jié)點(diǎn)的內(nèi)存總量、可用內(nèi)存量以及CPU核數(shù),所述第一資源包括的內(nèi)存量和CPU核數(shù)分別小于或等于每個計算節(jié)點(diǎn)的可用內(nèi)存量和CPU核數(shù);

確定每個監(jiān)控周期下每個計算節(jié)點(diǎn)在執(zhí)行所述迭代應(yīng)用時的軟件信息,所述軟件信息包括所述迭代應(yīng)用對所述第一資源的內(nèi)存使用量和CPU利用率;

根據(jù)每個計算節(jié)點(diǎn)在第m個監(jiān)控周期下和第m+1個監(jiān)控周期下執(zhí)行所述迭代應(yīng)用時的軟件信息確定所述迭代應(yīng)用對所述第一資源的使用量達(dá)到收斂,m為正整數(shù);若每個計算節(jié)點(diǎn)從第m個監(jiān)控周期到第m+1個監(jiān)控周期執(zhí)行所述迭代應(yīng)用時對所述第一資源所包括內(nèi)存的使用量趨于穩(wěn)定,則所述迭代應(yīng)用對所述第一資源的使用量達(dá)到收斂;

根據(jù)第1至第m+1個監(jiān)控周期下每個計算節(jié)點(diǎn)在執(zhí)行所述迭代應(yīng)用時的軟件信息為Spark集群的任務(wù)執(zhí)行單元分配第二資源,以用于所述任務(wù)執(zhí)行單元重新執(zhí)行所述迭代應(yīng)用,所述第二資源包括的內(nèi)存量和CPU核數(shù)分別小于或等于第一資源包括的內(nèi)存量和CPU核數(shù)。

2.根據(jù)權(quán)利要求1所述的Spark平臺資源動態(tài)分配方法,其特征在于,每個計算節(jié)點(diǎn)從第m個監(jiān)控周期到第m+1監(jiān)控周期執(zhí)行所述迭代應(yīng)用時對所述第一資源的內(nèi)存使用量趨于穩(wěn)定,包括:

若每個計算節(jié)點(diǎn)從第m個監(jiān)控周期到第m+1個監(jiān)控周期執(zhí)行所述迭代應(yīng)用時內(nèi)存使用量變化率滿足如下公式,則每個計算節(jié)點(diǎn)對所述第一資源的內(nèi)存使用量趨于穩(wěn)定:

δi<α

其中,δi表示計算節(jié)點(diǎn)i從第m到第m+1個監(jiān)控周期下執(zhí)行所述迭代應(yīng)用時的內(nèi)存使用量變化率,i表示計算節(jié)點(diǎn)的編號,α表示預(yù)設(shè)變化率閾值;

δi通過以下公式確定:

δi=(MEMi(m+1)-MEMim)/MEMim

其中,MEMim和MEMi(m+1)分別表示計算節(jié)點(diǎn)i在第m個監(jiān)控周期下和第m+1個監(jiān)控周期下執(zhí)行所述迭代應(yīng)用時的內(nèi)存使用量。

3.根據(jù)權(quán)利要求1所述的Spark平臺資源動態(tài)分配方法,其特征在于,根據(jù)第1至第m+1個監(jiān)控周期下每個計算節(jié)點(diǎn)在執(zhí)行所述迭代應(yīng)用時的軟件信息為Spark集群的任務(wù)執(zhí)行單元分配第二資源,通過以下公式確定:

其中,MEMsug表示第二資源包括的內(nèi)存量,CPUsug表示第二資源包括的CPU核數(shù),β1和β2分別為內(nèi)存量和CPU核數(shù)的資源需求浮動因子,MEMmax表示第m+1個監(jiān)控周期下所有計算節(jié)點(diǎn)在執(zhí)行所述迭代應(yīng)用時內(nèi)存使用量中的最大值,CPUmax表示從第1個監(jiān)控周期到第m+1個監(jiān)控周期中所有計算節(jié)點(diǎn)在執(zhí)行所述迭代應(yīng)用時CPU利用率中的最大值,CPU_Core_NUM表示每個計算節(jié)點(diǎn)的CPU核數(shù)。

4.根據(jù)權(quán)利要求2所述的Spark平臺資源動態(tài)分配方法,其特征在于,MEMim和MEMi(m+1)分別通過以下公式確定:

MEMim=(MEM_USED′im-MEM_USEDi)

MEMi(m+1)=(MEM_USED′i(m+1)-MEM_USEDi)

其中,MEM_USEDi表示計算節(jié)點(diǎn)i無應(yīng)用執(zhí)行時的內(nèi)存使用量,MEM_USED′im與MEM_USED′i(m+1)分別表示計算節(jié)點(diǎn)i在第m和第m+1個監(jiān)控周期的內(nèi)存總使用量,MEMim和MEMi(m+1)分別表示計算節(jié)點(diǎn)i在第m和第m+1個監(jiān)控周期執(zhí)行迭代應(yīng)用時的內(nèi)存使用量。

下載完整專利技術(shù)內(nèi)容需要扣除積分,VIP會員可以免費(fèi)下載。

該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于華中科技大學(xué),未經(jīng)華中科技大學(xué)許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服

本文鏈接:http://www.szxzyx.cn/pat/books/201710481071.1/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。

×

專利文獻(xiàn)下載

說明:

1、專利原文基于中國國家知識產(chǎn)權(quán)局專利說明書;

2、支持發(fā)明專利 、實(shí)用新型專利、外觀設(shè)計專利(升級中);

3、專利數(shù)據(jù)每周兩次同步更新,支持Adobe PDF格式;

4、內(nèi)容包括專利技術(shù)的結(jié)構(gòu)示意圖流程工藝圖技術(shù)構(gòu)造圖

5、已全新升級為極速版,下載速度顯著提升!歡迎使用!

請您登陸后,進(jìn)行下載,點(diǎn)擊【登陸】 【注冊】

關(guān)于我們 尋求報道 投稿須知 廣告合作 版權(quán)聲明 網(wǎng)站地圖 友情鏈接 企業(yè)標(biāo)識 聯(lián)系我們

鉆瓜專利網(wǎng)在線咨詢

周一至周五 9:00-18:00

咨詢在線客服咨詢在線客服
tel code back_top
主站蜘蛛池模板: 国产精品美女一区二区视频| 亚洲三区二区一区| 午夜天堂电影| 国产色婷婷精品综合在线播放| 国产欧美日韩二区| 国内久久精品视频| 欧美午夜一区二区三区精美视频| 91福利视频免费观看| 欧美日韩激情一区| 日本精品一区在线| 夜夜躁人人爽天天天天大学生| 欧美日韩国产91| 日本白嫩的18sex少妇hd| 久久不卡精品| 免费毛片a| 欧美性受xxxx狂喷水| 日韩av免费网站| 中文字幕日本一区二区| 99国产超薄丝袜足j在线观看| 国产乱一区二区三区视频| 国产日产精品一区二区| 欧美日韩国产在线一区| 亚洲久色影视| 日韩有码一区二区三区| 午夜肉伦伦| 国产91综合一区在线观看| 好吊妞国产欧美日韩免费观看网站| 日本神影院一区二区三区| 欧美乱码精品一区二区| 亚洲欧洲日韩在线| 视频一区二区三区欧美| 88国产精品视频一区二区三区| 一区二区国产盗摄色噜噜| 色一情一交一乱一区二区三区| 亚洲国产另类久久久精品性| 国产精品电影免费观看| 99爱精品在线| 欧美在线视频一区二区三区| 少妇在线看www| 国产毛片精品一区二区| 国产精品一区在线播放| 精品视频久| 中文字幕一区二区三区乱码视频| 19videosex性欧美69| 91中文字幕一区| 中文字幕日本一区二区| 国产精品久久久久久久久久嫩草| 国产国产精品久久久久| 肥大bbwbbwbbw高潮| 国产区精品区| 狠狠色噜噜狠狠狠合久| 欧美在线播放一区| 色婷婷噜噜久久国产精品12p| 欧美一区视频观看| 日韩一级视频在线| 国产原创一区二区 | 香蕉久久国产| 最新国产精品自拍| 午夜剧场a级免费| 精品国产91久久久| 欧美高清性xxxx| 国产88久久久国产精品免费二区| 日韩一区二区精品| 欧美一区二区三区四区在线观看| 国产精品19乱码一区二区三区| 国产精品一二三四五区| 国产一区日韩在线| 午夜激情在线免费观看| 国产日韩一区在线| 国产伦精品一区二区三区免费迷| 精品三级一区二区| 国产精品女人精品久久久天天| 国产色99| 国产黄色一区二区三区 | **毛片在线| 国产超碰人人模人人爽人人添| 91看片app| 亚洲麻豆一区| 狠狠色噜噜狠狠狠狠| 国产精品一二三区免费| 99国产精品欧美久久久久的广告| 国产精品欧美久久| 91av一区二区三区| 国产亚洲精品久久久久秋霞 | 狠狠色丁香久久婷婷综合_中| 久久综合国产伦精品免费| 国产精品免费观看国产网曝瓜| 国产大片一区二区三区| 性生交片免费看片| _97夜夜澡人人爽人人| www色视频岛国| 午夜激情影院| 欧美亚洲精品suv一区| 91精品综合| 国产精品黑色丝袜的老师| 午夜av在线电影| 人人澡超碰碰97碰碰碰| 国产精品视频免费看人鲁| 亚洲欧美一区二区精品久久久| 一区二区中文字幕在线观看| 99久精品视频| 国产精品一区二区麻豆| 欧美日韩一级二级| 91精品资源| 久久午夜无玛鲁丝片午夜精品| 中文字幕欧美一区二区三区| 欧美hdxxxx| 久久综合狠狠狠色97| 国产69精品久久久久久| 国产乱人伦偷精品视频免下载| 国产主播啪啪| 欧美人妖一区二区三区| 国产九九影院| 国产一区影院| 91精品一区二区中文字幕| 性生交大片免费看潘金莲| 国产一区二区三级| 狠狠色噜噜狠狠狠888奇米| 国产午夜亚洲精品| 午夜亚洲影院| 欧美一区二区三区四区夜夜大片| 亚洲五码在线| 欧美日韩国产三区| 色噜噜狠狠狠狠色综合久| 久久久久久久国产精品视频| 午夜免费av电影| 久久精品国产一区二区三区不卡| 国产欧美精品一区二区三区-老狼| 国产精品香蕉在线的人| 午夜电影院理论片做爰| 中文字幕制服丝袜一区二区三区| 国产一区二区三区国产| 亚洲码在线| 久久精品麻豆| 少妇厨房与子伦在线观看| 96国产精品| 国内久久久久久| 强制中出し~大桥未久10| 99久久久国产精品免费无卡顿| 国产午夜精品av一区二区麻豆| 国产一区二区三区黄| 97精品久久久午夜一区二区三区| 九色国产精品入口| 国模少妇一区二区三区| 99国产精品99久久久久久粉嫩| 国产亚洲精品久久久456| 国产人成看黄久久久久久久久| 狠狠色噜噜狠狠狠狠2021免费 | 国产电影精品一区二区三区| 欧美日韩精品在线播放| 日日夜夜一区二区| 免费高潮又黄又色又爽视频| 日本少妇高潮xxxxⅹ| 日韩精品一区在线视频| 91福利视频免费观看| 国产91一区| 2020国产精品自拍| 一区二区久久精品| 国产人伦精品一区二区三区| 91性高湖久久久久久久久_久久99| 国产精品视频二区不卡| 国产人澡人澡澡澡人碰视| 97欧美精品| 欧美精品一区二区性色| 国产精品一级片在线观看| 欧美日韩一区二区三区在线播放 | 91久久免费| 国产91视频一区二区| 亚洲国产欧美一区| 国产欧美一区二区三区四区| 欧美中文字幕一区二区三区| 日韩一区二区精品| 精品国产二区三区| 色噜噜狠狠色综合影视| 午夜老司机电影| 国产经典一区二区三区| 国产91在| 久久久99精品国产一区二区三区| 久久精品一二三四| 99久久精品免费视频| 国产伦高清一区二区三区 | 免费午夜在线视频| 中文无码热在线视频| 国产一区二区综合| 日韩中文字幕亚洲欧美| 日本高清一二区| 国产午夜精品一区二区三区在线观看| 国产日韩欧美三级| 欧美日韩国产专区| 激情欧美日韩| 99国产伦精品一区二区三区| 中文字幕一区二区三区日韩精品| 久久综合伊人77777麻豆最新章节 一区二区久久精品66国产精品 | 一区不卡av| 久久精品综合视频| 99久热精品| 欧美日韩一级黄| 精品国产一区二区三区免费| 国产日韩一区二区在线| 精品国产乱码一区二区三区在线| 久久精品视频一区二区| 99精品欧美一区二区三区美图| 视频国产一区二区| 综合久久一区| 久久精品国产亚洲7777| 国产偷久久一区精品69| 国产69久久| 欧美一区二区激情三区| 色噜噜狠狠色综合中文字幕| 中文字幕a一二三在线| 99爱精品视频| 久久久久亚洲精品| 日本精品一二三区| 99久国产| 久久精品国产亚| 国产91一区| 夜夜夜夜夜猛噜噜噜噜噜gg| 国产精品国精产品一二三区| 狠狠色狠狠色综合系列| 亚洲午夜久久久久久久久电影院| 91精品综合在线观看| 久久一二区| 欧美一区二区三区激情视频| 国产亚洲精品久久777777| 国产一区二区精品免费| 欧美乱码精品一区二区三| 精品一区欧美| 91超碰caoporm国产香蕉| 国产精品一二三在线观看| 91麻豆精品国产91久久久无限制版| 国产精品一级片在线观看| 国产女人好紧好爽| 99精品国产一区二区三区麻豆| 91久久国产露脸精品国产| 免费看大黄毛片全集免费| 国语对白一区二区| 欧洲在线一区| 久久99精品国产麻豆婷婷| 亚洲s码欧洲m码在线观看| 欧美一区二区三区片| 国产性猛交| 久久免费精品国产| 99视频一区| 久久一区二区精品视频| 午夜叫声理论片人人影院| 国产精品自拍在线|