[發明專利]一種文件傳輸方法、裝置、設備及存儲介質

在審

• 申請號: 202110856466.1
• 申請日: 2021-07-28
• 公開（公告）號: CN113746897A
• 公開（公告）日: 2021-12-03
• 發明（設計）人: 劉偉;宿棟棟;沈艷梅;闞宏偉
• 申請（專利權）人: 浪潮電子信息產業股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;G06F15/173;G06F13/28
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 薛嬌

本發明公開了一種文件傳輸方法、裝置、設備及存儲介質，該方法包括：接收應用程序發起的文件傳輸請求，在文件傳輸請求的觸發下申請內核緩存，并從磁盤中讀取相應文件至內核緩存中；通過RDMA網卡驅動告知RDMA網卡硬件發起讀操作，以指示RDMA網卡硬件讀取內核緩存中的文件至RDMA網卡硬件的內部緩存中，并將內部緩存中的文件發送至遠端節點。可見，本申請以內核空間已有的RDMA網卡驅動提供的相關功能為基礎，通過將磁盤中相應文件讀入申請的內核緩存及將內核緩存中相應文件讀入RDMA網卡硬件實現文件傳輸，避免冗余的內存拷貝操作，降低數據從磁盤搬運到RDMA網卡硬件內部緩存的時間，提高文件傳輸的傳輸效率。

技術領域

本發明涉及數據搬運技術領域，更具體地說，涉及一種文件傳輸方法、裝置、設備及存儲介質。

背景技術

當前使用RDMA(Remote Direct Memory Access，遠程直接地址訪問)實現文件傳輸功能時，技術層面主要分如下幾個步驟：在應用程序的觸發下，將數據從磁盤讀入內核緩存，再將數據從內核緩存拷貝到應用緩存，最后將數據從應用緩存讀入硬件內部緩存，并將數據從硬件內部緩存發送至遠端節點。可見，上述操作步驟中，和數據搬移有關的一共有三次，分別為將數據從磁盤讀入內核緩存、將數據從內核緩存拷貝到應用緩存、從應用緩存讀入硬件內部緩存，其中將數據從內核緩存拷貝到應用緩存的內存拷貝，本質上是把數據從內存硬件中的一段地址空間搬移到另一段地址空間，從原理上是一次冗余操作，并且非常耗時。

發明內容

本發明的目的是提供一種文件傳輸方法、裝置、設備及存儲介質，能夠避免冗余的內存拷貝操作，降低數據從磁盤搬運到RDMA網卡硬件內部緩存的時間，提高文件傳輸的傳輸效率。

為了實現上述目的，本發明提供如下技術方案：

一種文件傳輸方法，包括：

接收應用程序發起的文件傳輸請求，在所述文件傳輸請求的觸發下申請內核緩存，并從磁盤中讀取相應文件至所述內核緩存中；

通過RDMA網卡驅動告知RDMA網卡硬件發起讀操作，以指示所述RDMA網卡硬件讀取所述內核緩存中的文件至所述RDMA網卡硬件的內部緩存中，并將所述內部緩存中的文件發送至遠端節點。

優選的，從磁盤中讀取相應文件，包括：

通過DMA操作從所述磁盤中讀取相應文件；

指示所述RDMA網卡硬件讀取所述內核緩存中的文件，包括：

指示所述RDMA網卡硬件通過DMA操作讀取所述內核緩存中的文件。

優選的，在所述文件傳輸請求的觸發下請求內核緩存，包括：

指示文件系統申請內核緩存，接收所述文件系統返回的內核緩存地址信息，以供基于所述內核緩存地址信息將相應文件發送至所述內核緩存中；其中，所述內核緩存地址信息為所述文件系統申請得到的內核緩存的地址信息。

優選的，通過RDMA網卡驅動告知RDMA網卡硬件發起讀操作之前，還包括：

調用所述RDMA網卡驅動提供的緩存注冊接口注冊所述內核緩存，以供所述RDMA網卡硬件基于注冊的所述內核緩存發起讀操作；

通過RDMA網卡驅動告知RDMA網卡硬件發起讀操作，包括：

調用所述RDMA網卡驅動提供的指示讀接口，指示所述RDMA網卡驅動告知所述RDMA網卡硬件發起讀操作。

一種文件傳輸裝置，包括：

第一讀模塊，用于：接收應用程序發起的文件傳輸請求，在所述文件傳輸請求的觸發下申請內核緩存，并從磁盤中讀取相應文件至所述內核緩存中；