[發明專利]一種任務的調度方法、裝置、設備及存儲介質

有效

• 申請號: 202110957716.0
• 申請日: 2021-08-20
• 公開（公告）號: CN113408745B
• 公開（公告）日: 2021-11-16
• 發明（設計）人: 不公告發明人
• 申請（專利權）人: 北京瑞萊智慧科技有限公司
• 主分類號: G06N20/00
• 分類號: G06N20/00;G06F9/50
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 何少巖

1.一種任務的調度方法，其特征在于，所述調度方法應用于任務調度系統，所述任務調度系統包括：任務發起終端、負載服務器以及多個任務執行終端；所述調度方法包括：

所述負載服務器接收所述任務發起終端發送的針對目標任務的數據接收請求；其中，所述目標任務用于表征利用多種不同類型的目標訓練數據構建目標模型的建模任務；所述數據接收請求中至少包括：所述目標任務的任務標識以及每一所述目標訓練數據的數據標識；

所述負載服務器根據預先存儲的任務處理映射表，從所述多個任務執行終端中，確定針對所述目標任務的目標任務執行終端；其中，所述任務處理映射表中至少包括：多個不同任務的任務標識、每一所述任務對應的多個訓練數據的數據標識以及每一所述訓練數據對應的通信端口地址；不同的目標任務執行終端上存儲的所述目標訓練數據不同；

所述負載服務器向每一所述目標任務執行終端發送針對該目標任務執行終端的數據傳輸請求，并接收該目標任務執行終端發送的目標數據處理結果；其中，所述目標數據處理結果用于表征該目標任務執行終端對應的所述目標訓練數據在所述目標任務下對應的數據處理結果；

所述負載服務器將接收到的每一所述目標數據處理結果作為針對所述目標任務的任務執行結果，并將所述任務執行結果發送給所述任務發起終端；

其中，當所述任務發起終端以及每一所述任務執行終端分別對應不同的數據加密規則和數據解密規則時，所述數據接收請求中還包括：所述任務發起終端上的數據加密規則與數據解密規則；每一所述目標任務執行終端向所述負載服務器發送的是所述目標數據處理結果的第一加密結果；所述第一加密結果是每一所述目標任務執行終端按照該目標任務執行終端上的數據加密規則，對所述目標數據處理結果進行加密處理后得到的；所述任務處理映射表中還包括：每一所述任務執行終端上的數據加密規則和數據解密規則。

2.根據權利要求1所述的調度方法，其特征在于，在所述負載服務器接收所述任務發起終端發送的針對目標任務的數據接收請求之前，所述調度方法，還包括：

所述任務發起終端響應針對所述目標任務的啟動操作，從所述多個任務執行終端中，確定每一所述目標訓練數據所在的任務執行終端為該目標訓練數據對應的第一任務執行終端；

所述任務發起終端針對每一所述第一任務執行終端，生成該第一任務執行終端對應的任務創建請求，并將所述任務創建請求發送給該第一任務執行終端；其中，所述任務創建請求中包括：所述目標任務的任務標識、該第一任務執行終端的終端標識、該第一任務執行終端對應的所述目標訓練數據的數據標識以及該目標訓練數據在所述目標任務下的數據處理規則；

每一所述第一任務執行終端在接收到所述任務創建請求后，啟動針對所述目標任務的目標容器，通過所述目標容器處理該第一任務執行終端上存儲的所述目標訓練數據，并將所述目標容器的容器端口信息發送給所述負載服務器；其中，所述容器端口信息中至少包括：所述目標任務的任務標識、所述目標容器的容器端口地址以及所述目標容器處理的目標訓練數據的數據標識；

所述負載服務器在接收到每一所述目標容器發送的所述容器端口信息后，以所述容器端口信息中的容器端口地址作為該目標容器處理的所述目標訓練數據對應的通信端口地址，將所述容器端口信息存入所述任務處理映射表中。

3.根據權利要求2所述的調度方法，其特征在于，所述啟動針對所述目標任務的目標容器，通過所述目標容器處理該第一任務執行終端上存儲的所述目標訓練數據，包括：

所述第一任務執行終端響應于接收到的所述任務創建請求，根據該任務創建請求中包括的所述目標任務的任務標識，生成針對所述目標任務的虛擬容器啟動指令；

根據所述虛擬容器啟動指令，生成針對所述目標任務的虛擬容器，并將生成的該虛擬容器作為所述目標容器；

通過打包鏡像的方式，將該第一任務執行終端上存儲的所述目標訓練數據與該目標訓練數據在所述目標任務下對應的環境依賴信息，存放到所述目標容器中；其中，所述環境依賴信息用于表征該目標訓練數據在所述目標任務下對應的數據運行環境；

在所述目標容器中，按照該目標訓練數據在所述目標任務下的數據處理規則，對該目標訓練數據進行數據處理，得到該目標訓練數據對應的所述目標數據處理結果。