[發(fā)明專利]任務(wù)調(diào)度方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201911047671.2
• 申請日: 2019-10-30
• 公開（公告）號: CN110837410B
• 公開（公告）日: 2022-05-24
• 發(fā)明（設(shè)計(jì)）人: 張磊
• 申請（專利權(quán)）人: 北京奇藝世紀(jì)科技有限公司
• 主分類號: G06F9/48
• 分類號: G06F9/48;G06F9/50
• 代理公司: 北京銀龍知識產(chǎn)權(quán)代理有限公司 11243
• 代理人: 許靜;黃燦

本發(fā)明實(shí)施例提供了一種任務(wù)調(diào)度方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)，該方法包括：獲取目標(biāo)任務(wù)隊(duì)列；其中，所述目標(biāo)任務(wù)隊(duì)列為包括有至少一個待調(diào)度任務(wù)的任務(wù)隊(duì)列；按照所述目標(biāo)任務(wù)隊(duì)列中待調(diào)度任務(wù)的優(yōu)先級從高到低的順序，依次對所述目標(biāo)任務(wù)隊(duì)列中的待調(diào)度任務(wù)進(jìn)行調(diào)度。本發(fā)明實(shí)施例能夠支持不同優(yōu)先級的任務(wù)調(diào)度，從而能夠?qū)崿F(xiàn)靈活的任務(wù)優(yōu)先調(diào)度，提高任務(wù)調(diào)度的靈活性。

技術(shù)領(lǐng)域

本發(fā)明涉及云計(jì)算技術(shù)領(lǐng)域，特別是涉及一種任務(wù)調(diào)度方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)。

背景技術(shù)

大規(guī)模的深度學(xué)習(xí)模型或海量數(shù)據(jù)的訓(xùn)練通常是基于容器的形式進(jìn)行管理和調(diào)度的，例如，使用Kubernates或者M(jìn)esos的容器管理系統(tǒng)進(jìn)行調(diào)度。

現(xiàn)有的容器管理系統(tǒng)的任務(wù)調(diào)度通常是按照時間提交的先后順序?qū)θ蝿?wù)進(jìn)行調(diào)度的，然而，在運(yùn)行資源不足，訓(xùn)練任務(wù)較多的情況下，其無法實(shí)現(xiàn)靈活的任務(wù)調(diào)度。

因此，現(xiàn)有的容器管理系統(tǒng)中存在任務(wù)調(diào)度的靈活性比較差的問題。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例的目的在于提供一種任務(wù)調(diào)度方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)，以實(shí)現(xiàn)靈活的任務(wù)優(yōu)先調(diào)度，提高任務(wù)調(diào)度的靈活性的目的。具體技術(shù)方案如下：

在本發(fā)明實(shí)施的第一方面，首先提供了一種任務(wù)調(diào)度方法，所述方法包括：

獲取目標(biāo)任務(wù)隊(duì)列；其中，所述目標(biāo)任務(wù)隊(duì)列為包括有至少一個待調(diào)度任務(wù)的任務(wù)隊(duì)列；

按照所述目標(biāo)任務(wù)隊(duì)列中待調(diào)度任務(wù)的優(yōu)先級從高到低的順序，依次對所述目標(biāo)任務(wù)隊(duì)列中的待調(diào)度任務(wù)進(jìn)行調(diào)度。

在本發(fā)明實(shí)施的第二方面，還提供了一種任務(wù)調(diào)度裝置，所述裝置包括：

第一獲取模塊，用于獲取目標(biāo)任務(wù)隊(duì)列；其中，所述目標(biāo)任務(wù)隊(duì)列為包括有至少一個待調(diào)度任務(wù)的任務(wù)隊(duì)列；

調(diào)度模塊，用于按照所述目標(biāo)任務(wù)隊(duì)列中待調(diào)度任務(wù)的優(yōu)先級從高到低的順序，依次對所述目標(biāo)任務(wù)隊(duì)列中的待調(diào)度任務(wù)進(jìn)行調(diào)度。

在本發(fā)明實(shí)施的又一方面，還提供了一種計(jì)算機(jī)可讀存儲介質(zhì)，所述計(jì)算機(jī)可讀存儲介質(zhì)中存儲有指令，當(dāng)其在計(jì)算機(jī)上運(yùn)行時，使得計(jì)算機(jī)執(zhí)行上述任一所述的任務(wù)調(diào)度方法。

在本發(fā)明實(shí)施的又一方面，還提供了一種包含指令的計(jì)算機(jī)程序產(chǎn)品，當(dāng)其在計(jì)算機(jī)上運(yùn)行時，使得計(jì)算機(jī)執(zhí)行上述任一所述的任務(wù)調(diào)度方法。

本發(fā)明實(shí)施例提供的任務(wù)調(diào)度方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)，基于目標(biāo)任務(wù)隊(duì)列中待調(diào)度任務(wù)配置的優(yōu)先級，按照所述目標(biāo)任務(wù)隊(duì)列中待調(diào)度任務(wù)的優(yōu)先級從高到低的順序，依次對所述目標(biāo)任務(wù)隊(duì)列中的待調(diào)度任務(wù)進(jìn)行調(diào)度。可以解決在運(yùn)行資源不足而訓(xùn)練任務(wù)又較多的情況下，無法實(shí)現(xiàn)優(yōu)先級高的任務(wù)優(yōu)先調(diào)度的問題，同時，可以支持不同優(yōu)先級的任務(wù)調(diào)度，保證高優(yōu)先級的任務(wù)能夠快速的部署進(jìn)行訓(xùn)練，這樣，可以實(shí)現(xiàn)靈活的任務(wù)優(yōu)先調(diào)度，提高任務(wù)調(diào)度的靈活性。

附圖說明

為了更清楚地說明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單地介紹。

圖1為本發(fā)明實(shí)施例中任務(wù)調(diào)度方法的流程示意圖之一；

圖2為任務(wù)調(diào)度管理系統(tǒng)的主控服務(wù)器的任務(wù)管理示意圖；

圖3為本發(fā)明實(shí)施例中對待調(diào)度任務(wù)進(jìn)行調(diào)度的流程示意圖；

圖4為本發(fā)明實(shí)施例中任務(wù)調(diào)度方法的流程示意圖之二；

圖5為本發(fā)明實(shí)施例中任務(wù)調(diào)度裝置的結(jié)構(gòu)示意圖之一；

圖5為本發(fā)明實(shí)施例中任務(wù)調(diào)度裝置的結(jié)構(gòu)示意圖；

圖6為本發(fā)明實(shí)施例中任務(wù)調(diào)度裝置的調(diào)度模塊的細(xì)化結(jié)構(gòu)示意圖；