[發(fā)明專利]作業(yè)處理方法、裝置以及計算機(jī)設(shè)備

在審

• 申請?zhí)枺?/td>: 202010319530.8
• 申請日: 2020-04-21
• 公開（公告）號: CN111552547A
• 公開（公告）日: 2020-08-18
• 發(fā)明（設(shè)計）人: 張健
• 申請（專利權(quán)）人: 北京金山云網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: G06F9/48
• 分類號: G06F9/48;G06F9/50
• 代理公司: 北京超凡宏宇專利代理事務(wù)所(特殊普通合伙) 11463
• 代理人: 徐彥圣

1.一種作業(yè)處理方法，其特征在于，所述方法包括：

獲取待處理作業(yè)；

基于所述待處理作業(yè)的執(zhí)行階段，將所述待處理作業(yè)拆分成多個作業(yè)步；

根據(jù)處理每個所述作業(yè)步所需的計算資源，利用多個不同的所述計算資源分別處理所述作業(yè)步，得到所述待處理作業(yè)的最終處理結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)處理每個所述作業(yè)步所需的計算資源，利用多個不同的所述計算資源分別處理所述作業(yè)步，得到所述待處理作業(yè)的最終處理結(jié)果的步驟，包括：

循環(huán)進(jìn)行如下步驟，直至得到所述待處理作業(yè)的最終處理結(jié)果：

利用當(dāng)前的所述計算資源處理當(dāng)前的所述作業(yè)步，得到當(dāng)前的所述作業(yè)步與下一個所述作業(yè)步之間進(jìn)行數(shù)據(jù)交換的數(shù)據(jù)集；

根據(jù)處理下一個所述作業(yè)步所需的所述計算資源，確定下一個所述計算資源；

將所述當(dāng)前的作業(yè)步間交換數(shù)據(jù)集以及下一個所述作業(yè)步調(diào)度至下一個所述計算資源，以基于所述當(dāng)前的作業(yè)步間交換數(shù)據(jù)集利用下一個所述計算資源處理下一個所述作業(yè)步。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，將下一個所述作業(yè)步調(diào)度至下一個所述計算資源的步驟，包括：

對于多個下一個所述作業(yè)步，按照多個下一個所述作業(yè)步之間的優(yōu)先級順序確定待調(diào)度的下一個目標(biāo)作業(yè)步；

將所述下一個目標(biāo)作業(yè)步調(diào)度至下一個所述計算資源。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，每個所述作業(yè)步間交換數(shù)據(jù)集在作業(yè)步間的存儲模式包括下述任意一項：

緩存模式、消息隊列模式、分布式存儲模式以及數(shù)據(jù)庫模式。

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，根據(jù)處理下一個所述作業(yè)步所需的所述計算資源，確定下一個所述計算資源的步驟，包括：

基于所述作業(yè)步的歷史處理結(jié)果，對處理下一個所述作業(yè)步所需的所述計算資源進(jìn)行調(diào)整，按照調(diào)整結(jié)果確定下一個所述計算資源。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述歷史處理結(jié)果包括歷史處理耗時和歷史處理資源利用率；基于所述作業(yè)步的歷史處理結(jié)果，對處理下一個所述作業(yè)步所需的所述計算資源進(jìn)行調(diào)整的步驟，包括：

在所述作業(yè)步的所述歷史處理耗時和所述歷史處理資源利用率超出預(yù)設(shè)范圍時，更改處理下一個所述作業(yè)步所需的所述計算資源、所述計算資源的調(diào)度方式和所述作業(yè)步之間的數(shù)據(jù)交換方式，以使下一個所述作業(yè)步的處理耗時和處理資源利用率在所述預(yù)設(shè)范圍之內(nèi)。

7.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述待處理作業(yè)的作業(yè)數(shù)量為多個；

每個所述計算資源用于處理至少一個所述待處理作業(yè)中的所述作業(yè)步。

8.根據(jù)權(quán)利要求1至7任一項所述的方法，其特征在于，每個所述計算資源對應(yīng)執(zhí)行狀態(tài)，所述執(zhí)行狀態(tài)用于表示所述計算資源處理每個所述作業(yè)步的執(zhí)行狀態(tài)。

9.根據(jù)權(quán)利要求1所述的方法，其特征在于，對所述待處理作業(yè)的處理過程通過所述作業(yè)步的級別的管控完成；所述作業(yè)步的級別的管控內(nèi)容包括下述任意一項或多項：

針對所述作業(yè)步的暫停、取消、重啟、停止以及重跑的指令。

10.一種作業(yè)處理裝置，其特征在于，包括：

獲取模塊，用于獲取待處理作業(yè)；

拆分模塊，用于基于所述待處理作業(yè)的執(zhí)行階段，將所述待處理作業(yè)拆分成多個作業(yè)步；

處理模塊，用于根據(jù)處理每個所述作業(yè)步所需的計算資源，利用多個不同的所述計算資源分別處理所述作業(yè)步，得到所述待處理作業(yè)的最終處理結(jié)果。