[發明專利]用于作業處理的方法、設備和計算機程序產品

在審

• 申請號: 201911187922.7
• 申請日: 2019-11-28
• 公開（公告）號: CN112860421A
• 公開（公告）日: 2021-05-28
• 發明（設計）人: 聶雨虹;吳鵬飛;劉金鵬;賈真
• 申請（專利權）人: 伊姆西IP控股有限責任公司
• 主分類號: G06F9/50
• 分類號: G06F9/50
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 李崢宇

1.一種用于處理作業的方法，包括：

獲取所述作業中的第一部分中的第一組任務，所述第一組任務可以由第一組處理設備來并行地執行；

基于分布式處理系統中的多個處理設備中的處理設備的處理資源的狀態，分別向所述多個處理設備設置多個優先級，所述處理資源包括計算資源以及存儲資源中的至少任一項；

基于所述多個優先級，從所述多個處理設備中選擇所述第一組處理設備；以及

分別向所述第一組處理設備分配所述第一組任務，使得所述第一組處理設備分別利用各自的處理資源來處理所述第一組任務以生成第一組任務結果。

2.根據權利要求1所述的方法，其中分別向所述第一組處理設備分配所述第一組任務包括：針對所述多個處理設備中的處理設備，

根據確定所述處理設備的處理資源可用于處理與所述作業相關聯的多個任務，向所述處理設備分配長期優先級；以及

根據確定所述處理設備的所述處理資源可用于處理與所述作業相關聯的僅一個任務，向所述處理設備分配一次性優先級。

3.根據權利要求2所述的方法，其中所述處理資源包括計算資源和存儲資源兩者，以及其中向所述處理設備分配所述長期優先級包括以下中的至少任一項：

根據確定所述處理資源可用于處理與所述作業相關聯的被分配的全部任務，向所述處理設備分配第一優先級；以及

根據確定所述處理資源可用于處理與所述作業相關聯的被分配的至少兩個任務，向所述處理設備分配第二優先級。

4.根據權利要求2所述的方法，進一步包括：指示所述處理設備將所述任務結果存儲至所述第一組處理設備的存儲資源中。

5.根據權利要求4所述的方法，其中指示所述處理設備將所述任務結果存儲至所述第一組處理設備的存儲資源中包括以下中的至少任一項：

指示所述處理設備將所述任務結果存儲至所述第一組處理設備中的具有所述長期優先級的處理設備的存儲資源中；以及

指示所述處理設備將所述任務結果存儲至所述處理設備的存儲資源中。

6.根據權利要求2所述的方法，其中向所述處理設備分配所述一次性優先級包括以下中的至少任一項：

根據確定所述處理資源可用于處理與所述作業相關聯的被分配的僅一個任務，向所述處理設備分配第三優先級，所述處理資源包括計算資源和存儲資源；以及

根據確定所述處理資源可用于處理與所述作業相關聯的被分配的僅一個任務，向所述處理設備分配第四優先級，所述處理資源僅包括計算資源。

7.根據權利要求1所述的方法，其中分別向所述第一組處理設備分配所述第一組任務包括：

基于與所述作業相關聯的原始數據，分別生成與所述第一組任務相關聯的第一組數據劃分；

將所述第一組數據劃分存儲至所述第一組處理設備中的存儲資源中；以及

指示所述第一組處理設備分別從所述第一組處理設備中的所述存儲資源獲取所述第一組數據劃分。

8.根據權利要求4所述的方法，進一步包括：

接收來自所述第一組處理設備的與所述第一組任務的第一組任務結果相關聯的第一組結果地址；以及

基于所述第一組結果地址獲取所述第一組任務結果。

9.根據權利要求8所述的方法，進一步包括：

獲取所述作業中的第二部分中的第二組任務，所述第二組任務可以由第二組處理設備來并行地執行；

基于所述多個優先級，從所述多個處理設備中選擇所述第二組處理設備；以及

分別向所述第二組處理設備分配所述第二組任務，使得所述第二組處理設備分別利用各自的處理資源來處理所述第二組任務以生成第二組任務結果。