[發明專利]分配運算任務量的方法、裝置及存儲介質

在審

• 申請號: 202010464289.8
• 申請日: 2020-05-27
• 公開（公告）號: CN113741788A
• 公開（公告）日: 2021-12-03
• 發明（設計）人: 魯鵬;熊偉;劉金虎;李文思;張瑛
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F9/50
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 顏晶

本申請公開了一種分配運算任務量的方法、裝置及存儲介質，屬于存儲技術領域。在本申請中，確定限制存儲設備的運算速度的資源，并根據確定出的資源將運算任務劃分為多個子任務，將多個子任務中的第一子任務分配給運算單元，將多個子任務中的第二子任務分配給第二運算單元。在確定出限制存儲設備的運算速度的資源的基礎上，根據該資源來分配運算量可以在更好的利用該資源的情況下，協同其他資源來完成運算任務的運算，從而使得存儲設備在執行運算任務時的運算速度更優。

技術領域

本申請涉及數據存儲技術領域，特別涉及一種分配運算任務量的方法、裝置及存儲介質。

背景技術

當前，對于包括有控制器和多個硬盤的存儲設備而言，隨著存儲設備存儲的數據量的增加，僅通過控制器來完成存儲設備中諸如數據重構之類的數據運算已經無法滿足客戶需求。基于此，可以在存儲設備的控制器和多個硬盤之間增加具有運算能力的其他形態的運算單元，從而與控制器協同完成數據運算。如此，對于一個數據運算任務，則需要在控制器和其他運算單元之間進行運算任務量的分配。

相關技術中，可以在存儲設備的控制器和多個硬盤之間增加具有運算能力的硬盤框來協同控制器進行數據運算。在這種情況下，以數據重構任務為例，通常均是將重構任務中一半數據的中間運算交給該硬盤框來完成，之后，由控制器根據該硬盤框得到的中間運算結果以及另一半數據完成數據重構。然而，這種機械的分配方式可能無法保證重構速度達到最優，從而導致客戶體驗較差。

發明內容

本申請提供了一種分配運算任務量的方法、裝置及存儲介質，可以提高存儲設備執行運算任務時的運算速度。所述技術方案如下：

第一方面，提供了一種分配運算任務量的方法，所述方法應用于存儲設備中，所述存儲設備包括至少一個第一運算單元和第一內存、至少一個第二運算單元和第二內存，至少一個所述第一運算單元和第一內存位于所述存儲設備的控制器或硬盤框內，至少一個所述第二運算單元和第二內存位于所述控制器或所述硬盤框內，所述方法包括：確定限制所述存儲設備的運算速度的資源，所述資源包括所述第一內存的內存帶寬，或者所述第二內存的內存帶寬，或者所述控制器與所述硬盤框之間的鏈路帶寬，或者硬盤框所包含的硬盤的讀寫能力；根據所述確定出的限制所述存儲設備的運算速度的資源，將運算任務劃分為多個子任務，將所述多個子任務中的第一子任務分配給第一運算單元，將所述多個子任務中的第二子任務分配給第二運算單元。

在本申請實施例中，第一運算單元和第二運算單元可以為形態不同或相同的運算單元，所謂形態不同，可以是指芯片的類型不同。例如，CPU和諸如GPU、NPU之類的AI芯片就是不同形態的運算單元。另外，在本申請實施例中，控制器內包括CPU，除此之外，還可以包括如AI芯片之外的其他類型的處理器。硬盤框內可以包括運算單元，也可以不包括運算單元。當硬盤框包括運算單元時，該硬盤框包括的運算單元可以為CPU，也可以為GPU、NPU之類的AI芯片或者是其他類型的處理芯片。另外，第一內存是指屬于第一運算單元的內存，第二內存是指屬于第二運算單元的內存，所謂屬于某個運算單元的內存是指該內存用于存儲相應運算單元所執行的指令以及所涉及的數據。