[發明專利]一種文件系統任務調度方法、裝置、設備及可讀存儲介質

有效

• 申請號: 201911025105.1
• 申請日: 2019-10-25
• 公開（公告）號: CN110781145B
• 公開（公告）日: 2022-04-22
• 發明（設計）人: 肖國棟;張立強
• 申請（專利權）人: 浪潮電子信息產業股份有限公司
• 主分類號: G06F16/16
• 分類號: G06F16/16;G06F16/182;G06F9/50
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 郄晨芳

本發明公開了一種文件系統任務調度方法，包括：判斷總隊列中待處理任務的數量是否小于第一閾值；若待處理任務的數量小于第一閾值，則判斷前臺任務隊列中前臺任務的數量是否小于第二閾值；若前臺任務的數量小于第二閾值，則分別從各個任務隊列中獲取與任務隊列對應的第一數量個任務，并將任務放入總隊列的隊尾；其中，任務隊列包括前臺任務隊列和多個后臺任務隊列；若前臺任務的數量不小于第二閾值，則分別從各個任務隊列中獲取與任務隊列對應的第二數量個任務，并將任務放入總隊列的隊尾；該方法實現了根據前臺任務的積壓程度靈活分配計算資源的功能；本發明還提供了一種文件系統任務調度裝置、設備及計算機可讀存儲介質，同樣具有上述有益效果。

技術領域

本發明涉及分布式文件系統技術領域，特別涉及一種文件系統任務調度方法、文件系統任務調度裝置、文件系統任務調度設備及計算機可讀存儲介質。

背景技術

分布式文件系統中，在支持用戶應用發起的文件讀寫這些前臺業務的同時，往往還需要同時執行大量的后臺任務，例如常見的文件分級遷移功能，系統后臺根據用戶設置的遷移規則，自動將文件的物理存放位置，從某些硬盤遷移到另一些硬盤；或者如文件刪除功能，系統后臺掃描待刪除文件列表，將文件數據真正從磁盤上刪除。由于前臺任務與后臺任務共用系統處理能力，因此往往會引發資源搶占沖突。為避免后臺任務影響前臺業務性能，影響用戶使用感受，現有任務調度方法控制后臺任務本身占用的資源，例如設置后臺任務的并發數量、線程數量等。通過限制后臺任務所使用的資源，為前臺任務提供足夠的資源。但是現有任務調度方法無法靈活分配計算資源，在前臺任務很少的時候也限制后臺任務的執行，給文件系統的運行帶來很大不便。

因此，如何解決現有任務調度方法無法靈活分配計算資源，給文件系統的運行帶來很大不便的問題，是本領域技術人員需要解決的技術問題。

發明內容

有鑒于此，本發明的目的在于提供一種文件系統任務調度方法、文件系統任務調度裝置、文件系統任務調度設備及計算機可讀存儲介質，解決了現有任務調度方法無法靈活分配計算資源，給文件系統的運行帶來很大不便的問題。

為解決上述技術問題，本發明提供了一種文件系統任務調度方法，包括：

判斷總隊列中待處理任務的數量是否小于第一閾值；

若所述待處理任務的數量小于所述第一閾值，則判斷前臺任務隊列中前臺任務的數量是否小于第二閾值；

若所述前臺任務的數量小于所述第二閾值，則分別從各個任務隊列中獲取與所述任務隊列對應的第一數量個任務，并將所述任務放入所述總隊列的隊尾；其中，所述任務隊列包括所述前臺任務隊列和多個后臺任務隊列；

若所述前臺任務的數量不小于所述第二閾值，則分別從各個所述任務隊列中獲取與所述任務隊列對應的第二數量個任務，并將所述任務放入所述總隊列的隊尾。

可選的，在所述判斷總隊列中待處理任務的數量是否小于第一閾值之前，還包括：

從所述總隊列的前端開始依次執行所述總隊列中的所述待處理任務；

獲取用戶應用發送的前臺任務，并將所述前臺任務放入所述前臺任務隊列的隊尾；

將文件系統產生的后臺任務按照任務類型放入對應的所述后臺任務隊列的隊尾。

可選的，所述第一數量的計算過程，包括：

利用所述第一閾值和所述總隊列的長度計算空閑長度；

獲取各個所述任務隊列的優先級系數組成的優先級比例，利用所述優先級比例和所述空閑長度計算各個所述任務隊列對應的所述第一數量。

可選的，所述第二數量的計算過程，包括：

獲取各個任務隊列對應的積壓縮放系數；