[發明專利]一種作業協同處理方法及系統

有效

• 申請號: 202010404798.1
• 申請日: 2020-05-14
• 公開（公告）號: CN111309491B
• 公開（公告）日: 2020-11-06
• 發明（設計）人: 譚天;胡敏杰;陳健
• 申請（專利權）人: 北京并行科技股份有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50
• 代理公司: 北京思睿峰知識產權代理有限公司 11396
• 代理人: 謝建云;高攀

1.一種作業協同處理方法，適于在多個超級計算中心的第一超級計算中心中執行，所述超級計算中心包括多個資源節點，所述方法包括步驟：

獲取提交到所述第一超級計算中心的作業信息；

獲取所述作業信息后，若第一超級計算中心資源不足，根據作業信息生成資源請求，發送資源請求給其他超級計算中心，接收其他超級計算中心的請求結果，所述請求結果包括至少一個第二超級計算中心的可用資源信息，其中，所述第二超級計算中心包括多個資源節點；獲取預設的作業處理模式，根據所述作業處理模式和所述可用資源信息反復迭代將作業劃分為多個子作業，根據所述子作業信息生成配置信息，使所述第二超級計算中心根據所述配置信息分配可用資源，以處理子作業，所述配置信息包括資源最晚使用時間，以實現子作業執行完成后節點的動態釋放，其中，所述反復迭代是指：接收到第二超級計算中心返回的可用資源信息之后，若根據作業處理模式不接受所述可用資源信息的建議，則向第二超級計算中心發出拒絕報文，并繼續按前述邏輯向其它超級計算中心請求，直到所有作業都被分發，或者所有已知超級計算中心均不能提供更多資源為止；

所述多個子作業在進行處理時，通過消息機制進行協同通信，獲取第二超級計算中心對子作業的處理結果，與第一超級計算中心的處理結果進行合并；

其中，所述作業處理模式包括：最大本地化模式、最大性能化模式、最大經濟化模式。

2.如權利要求1所述的方法，所述作業信息包括執行文件和屬性信息，其中，

所述執行文件用于在資源節點上執行以處理作業；

所述屬性信息包括作業內存需求、作業性能需求和作業所需節點數，用于判斷資源節點是否可用。

3.如權利要求1所述的方法，所述請求結果還包括請求結果有效期，當請求結果超出有效期時，重新發送資源請求。

4.如權利要求1-3中任一項所述的方法，所述根據所述可用資源信息將作業劃分為多個子作業，包括步驟：

獲取預設的作業處理模式；

當作業處理模式是最大本地化模式時，優先使用第一超級計算中心的資源。

5.如權利要求1-3中任一項所述的方法，所述可用資源信息包括可用資源節點的性能參數，所述根據所述可用資源信息將作業劃分為多個子作業，還包括步驟；

當所述作業處理模式是最大性能化模式時，比較第一超級計算中心和第二超級計算中心的性能參數，優先使用性能更高的超級計算中心的資源。

6.如權利要求1-3中任一項所述的方法，所述可用資源信息包括可用資源節點的計費方式，所述根據所述可用資源信息將作業劃分為多個子作業，還包括步驟：

當所述作業處理模式是最大經濟化模式時，比較第一超級計算中心和第二超級計算中心的資源性價比，優先使用性價比更高的超級計算中心。

7.如權利要求1-3中任一項所述的方法，所述配置信息包括：第二超級計算中心的資源節點分配方式，以及資源最晚使用時間。

8.如權利要求1-3中任一項所述的方法，所述多個子作業在進行處理前，通過數據負載傳輸機制傳輸執行文件。