[發明專利]面向高性能計算的大規模運行環境快速啟動方法及系統

在審

• 申請號: 202110863957.9
• 申請日: 2021-07-29
• 公開（公告）號: CN113630453A
• 公開（公告）日: 2021-11-09
• 發明（設計）人: 盧凱;張文喆;王睿伯;遲萬慶;董勇;張偉;鄔會軍;吳振偉;謝旻;周恩強;李佳鑫;邵明天
• 申請（專利權）人: 中國人民解放軍國防科技大學
• 主分類號: H04L29/08
• 分類號: H04L29/08;G06F16/182;G06F16/176
• 代理公司: 湖南兆弘專利事務所(普通合伙) 43008
• 代理人: 胡君

1.一種面向高性能計算的大規模運行環境快速啟動方法，其特征在于，步驟包括：

S1.在高性能計算系統的登錄結點上為每個用戶預置層次化文件系統，所述層次化文件系統中將系統標準環境作為底層、用于存儲用戶所做文件修改的用戶空目錄作為上層；

S2.接收到用戶發出的作業運行請求時，對當前作業進行依賴分析并根據依賴分析結果進行運行環境分割，將所述層次化文件系統的上層文件系統中當前作業及當前作業所需要的依賴項作為第一部分傳輸內容、所述上層文件系統中其余文件作為第二部分傳輸內容；

S3.服務進程進行傳輸時，分步傳輸所述第一部分傳輸內容、所述第二部分傳輸內容，其中優先傳輸所述第一部分傳輸內容，在所述第一部分傳輸內容完成時啟動用戶作業。

2.根據權利要求1所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于：所述層次化文件系統中底層配置為被用戶共享，用戶作業的開發、運行環境的配置以及用戶所做的文件修改發生在所述層次化文件系統中上層。

3.根據權利要求1所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于，所述步驟S1后、步驟S2前，當用戶登陸到登陸節點上時，還包括將用戶視角下的根目錄重定向到所述層次化文件系統的整合目錄。

4.根據權利要求1所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于，所述步驟S3的步驟包括：

S301.服務進程開始進行傳輸時，傳輸所述第一部分傳輸內容；

S302.當所述第一部分傳輸內容傳輸完成，啟動運行環境以及用戶作業同時傳輸第二部分。

5.根據權利要求4所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于，所述步驟S302的步驟包括：

S311.服務進程接收到所述第一部分傳輸內容傳輸完成的信號時，在對應計算結點上啟動對應運行環境并開始執行作業；

S312.服務進程開始傳輸所述第二部分傳輸內容，當所述第二部分傳輸內容傳輸完成或者作業運行完成，結束傳輸并返回結果。

6.根據權利要求1～5中任意一項所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于，所述步驟S3中服務進程進行傳輸時，還包括根據當前作業規模確定傳輸方式，具體步驟包括：判斷當前作業規模，若當前作業規模不超過預先配置的系統傳輸能力臨界值，則使用第一傳輸方式，否則采用第二傳輸方式，所述第一傳輸方式與所述第二傳輸方式不同。

7.根據權利要求6所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于，所述第一傳輸方式為基于共享文件系統的運行環境拉取方式，所述第二傳輸方式為基于P2P文件傳輸的運行環境分發方式。

8.根據權利要求7所述的面向高性能計算的大規模運行環境快速啟動方法，其特征在于，所述系統傳輸能力臨界值具體根據所述基于共享文件系統拉取與所述基于P2P文件傳輸的性能等價點確定得到。

9.一種面向高性能計算的大規模運行環境快速啟動系統，其特征在于，包括：

文件系統配置模塊，用于在高性能計算系統的登錄結點上為每個用戶預置層次化文件系統，所述層次化文件系統中將系統標準環境作為底層、用于存儲用戶所做的文件修改的用戶空目錄作為上層；

依賴分析及運行環境分割模塊，用于接收到用戶發出的作業運行請求時，對當前作業進行依賴分析并根據依賴分析結果進行運行環境分割，將所述層次化文件系統的上層文件系統中當前作業及當前作業所需要的依賴項作為第一部分傳輸內容、所述上層文件系統中其余文件作為第二部分傳輸內容；

傳輸控制模塊，用于服務進程進行傳輸時，分步傳輸所述第一部分傳輸內容、所述第二部分傳輸內容，其中優先傳輸所述第一部分傳輸內容，在第一部分傳輸內容完成時啟動用戶作業。

10.一種計算機裝置，包括處理器以及存儲器，所述存儲器用于存儲計算機程序，所述處理器用于執行所述計算機程序，其特征在于，所述處理器用于執行所述計算機程序以執行如權利要求1～8中任意一項所述方法。