[發(fā)明專(zhuān)利]任務(wù)處理方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201911190921.8
• 申請(qǐng)日: 2019-11-28
• 公開(kāi)（公告）號(hào): CN112860424A
• 公開(kāi)（公告）日: 2021-05-28
• 發(fā)明（設(shè)計(jì)）人: 萬(wàn)雷;葉安華
• 申請(qǐng)（專(zhuān)利權(quán)）人: 上海商湯智能科技有限公司
• 主分類(lèi)號(hào): G06F9/50
• 分類(lèi)號(hào): G06F9/50;G06N3/08
• 代理公司: 廣州三環(huán)專(zhuān)利商標(biāo)代理有限公司 44202
• 代理人: 郝傳鑫;熊永強(qiáng)

1.一種任務(wù)處理方法，其特征在于，所述方法包括：

控制器獲取資源系統(tǒng)中多個(gè)容器的容器信息；

所述控制器根據(jù)所述資源系統(tǒng)中多個(gè)容器的容器信息建立容器信息映射表，所述容器信息映射表記錄所述多個(gè)容器的容器信息；

所述控制器基于所述多個(gè)容器的容器信息，將密鑰對(duì)和所述容器信息映射表分發(fā)至所述多個(gè)容器，以使所述多個(gè)容器在接收到分配的深度學(xué)習(xí)模型訓(xùn)練任務(wù)的情況下，基于所述容器信息映射表和所述密鑰對(duì)執(zhí)行所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述資源系統(tǒng)包括第一容器，所述第一容器中運(yùn)行有所述深度學(xué)習(xí)模型；

所述方法還包括：

所述第一容器的深度學(xué)習(xí)模型根據(jù)所述容器信息映射表，對(duì)所述深度學(xué)習(xí)模型的當(dāng)前處理任務(wù)進(jìn)行拆分，得到多個(gè)處理子任務(wù)；

所述第一容器的深度學(xué)習(xí)模型根據(jù)所述容器信息映射表，向多個(gè)第二容器中每個(gè)第二容器發(fā)送分配給所述每個(gè)第二容器的處理子任務(wù)的相關(guān)信息；

所述第二容器基于所述處理子任務(wù)的相關(guān)信息，執(zhí)行所述處理子任務(wù)。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述方法還包括：

所述控制器根據(jù)為所述第二容器分配的處理子任務(wù)的監(jiān)控對(duì)象標(biāo)識(shí)，監(jiān)控所述處理子任務(wù)的處理結(jié)果狀態(tài)值；

若檢測(cè)到所述處理子任務(wù)的處理結(jié)果狀態(tài)值發(fā)生變化，指示所述第一容器中的深度學(xué)習(xí)模型調(diào)整網(wǎng)絡(luò)參數(shù)。

4.根據(jù)權(quán)利要求2或3所述的方法，其特征在于，所述方法還包括：

調(diào)度器基于所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)所需資源大小和多個(gè)深度學(xué)習(xí)資源單元的當(dāng)前狀態(tài)，確定用于執(zhí)行所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)的深度學(xué)習(xí)資源單元，以使得所述多個(gè)深度學(xué)習(xí)資源單元中被使用的深度學(xué)習(xí)資源單元的數(shù)量最少。

5.根據(jù)權(quán)利要求2至4中任一項(xiàng)所述的方法，其特征在于，所述方法還包括：

調(diào)度器按照多個(gè)深度學(xué)習(xí)資源單元的排列順序，依次確定每個(gè)深度學(xué)習(xí)資源單元的當(dāng)前剩余資源量，直到找到當(dāng)前剩余資源量滿足所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)所需資源大小的深度學(xué)習(xí)資源單元；

所述調(diào)度器將找到的當(dāng)前剩余資源量滿足所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)所需資源大小的深度學(xué)習(xí)資源單元確定為所述多個(gè)第二容器分配的深度學(xué)習(xí)資源單元。

6.根據(jù)權(quán)利要求2或3所述的方法，其特征在于，所述方法還包括：

調(diào)度器基于所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)所需資源大小和多個(gè)深度學(xué)習(xí)資源單元的當(dāng)前狀態(tài)，確定用于執(zhí)行所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)的深度學(xué)習(xí)資源單元，以使得所述深度學(xué)習(xí)訓(xùn)練任務(wù)所屬用戶的至少一個(gè)深度學(xué)習(xí)任務(wù)被盡可能均勻地分配給所述多個(gè)深度學(xué)習(xí)資源單元。

7.根據(jù)權(quán)利要求2、3或6所述的方法，其特征在于，所述方法還包括：

調(diào)度器確定所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)所屬用戶當(dāng)前分配到多個(gè)深度學(xué)習(xí)資源單元中每個(gè)深度學(xué)習(xí)資源單元的任務(wù)數(shù)量，以及每個(gè)深度學(xué)習(xí)資源單元的當(dāng)前剩余資源量；

所述調(diào)度器將所述分配任務(wù)數(shù)量最少且當(dāng)前剩余資源量滿足所述深度學(xué)習(xí)模型訓(xùn)練任務(wù)所需資源大小的深度學(xué)習(xí)資源單元確定為所述多個(gè)第二容器分配的深度學(xué)習(xí)資源單元。

8.根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法，其特征在于，所述方法還包括：

若所述控制器沒(méi)有在預(yù)設(shè)的周期內(nèi)接收到所述多個(gè)容器中的第三容器上報(bào)的狀態(tài)信息，或基于所述第三容器上報(bào)的狀態(tài)信息確定所述第三容器當(dāng)前處于不健康狀態(tài)，通過(guò)所述容器信息映射表獲取所述第三容器的容器信息；

所述控制器根據(jù)所述第三容器的容器信息，生成創(chuàng)建第四容器的指令，其中，所述第四容器具有與所述第三容器相同的容器信息；

所述控制器將所述第三容器的處理子任務(wù)的相關(guān)信息發(fā)送至所述第四容器，以使得所述第四容器執(zhí)行所述處理子任務(wù)。