[發明專利]一種基于數據傳輸系統的數據傳輸方法、裝置及系統

有效

• 申請號: 201810930629.4
• 申請日: 2018-08-15
• 公開（公告）號: CN109120385B
• 公開（公告）日: 2021-08-17
• 發明（設計）人: 陳小龍;朱麗品
• 申請（專利權）人: 銳捷網絡股份有限公司
• 主分類號: H04L1/18
• 分類號: H04L1/18;H04L1/00
• 代理公司: 北京同達信恒知識產權代理有限公司 11291
• 代理人: 黃志華

本申請提供一種基于數據傳輸系統的數據傳輸方法、裝置及系統，用于減少重傳數據過程中的網絡傳輸負擔。該方法包括向至少一個管理節點中的第一管理節點發送用于獲取第一數據的第一請求，以使第一管理節點向至少一個存儲節點發送用于指示至少一個存儲節點中的L個存儲節點發送第一數據包括的K個數據塊以及與K個數據塊一一對應的K個第一信息的第一指令；從L個存儲節點中獲取與第一數據對應的M個數據塊，以及M個數據塊一一對應的M個第一信息；根據M個數據塊以及M個第一信息，從L個存儲節點中確定與M個數據塊中出現數據錯誤的第一數據塊對應的第一存儲節點；向第一存儲節點發送第二請求，以使第一存儲節點重新發送第一數據塊。

技術領域

本申請涉及通信技術領域，尤其涉及一種基于數據傳輸系統的數據傳輸方法、裝置及系統。

背景技術

遠程直接內存訪問(Remote Direct Memory Access，RDMA)傳輸數據可以滿足大數據傳輸的低處理延時的需求。存儲系統中，一個數據可能分布地存儲多個存儲節點中，當本地服務器需要獲取該數據時，需要向多個存儲節點發送數據讀取請求，該多個存儲節點中的每個存儲節點注冊相應的內存緩沖區，然后將存儲在每個存儲節點上的數據塊依次寫入注冊的內存緩沖區中，本地服務器獲取該內存緩沖區中的多個數據塊，然后將多個數據塊進行組合，最終獲取該數據。

本地服務器依次接收到相應的數據塊之后，會校驗某個或者某些數據塊是否出錯，一旦某個數據塊出錯，本地服務器會要求該多個存儲節點中的每個存儲節點重傳數據，多個存儲節點需要重復上述的數據傳輸過程，多個存儲節點重傳數據過程會消耗網絡帶寬，增加網絡傳輸負擔。

發明內容

本申請實施例提供一種數據傳輸方法、裝置及系統，用于減少重傳數據過程中的網絡傳輸負擔。

本申請實施例提供的具體技術方案如下：

第一方面，提供一種基于數據傳輸系統的數據傳輸方法，所述數據傳輸系統包括至少一個管理節點、至少一個存儲節點和至少一個服務器，所述方法應用于所述至少一個服務器中的第一服務器中，所述方法包括：

向所述至少一個管理節點中的第一管理節點發送用于獲取第一數據的第一請求，以使所述第一管理節點向所述至少一個存儲節點發送用于指示所述至少一個存儲節點中的L個存儲節點發送所述第一數據包括的K個數據塊以及與所述K個數據塊一一對應的K個第一信息的第一指令，其中，所述第一數據分布存儲在所述L個存儲節點中，所述K個第一信息中的每個第一信息包括對應的數據塊所在存儲節點的信息，L為小于或等于K的正整數；

從所述L個存儲節點中獲取與所述第一數據對應的M個數據塊，以及所述M個數據塊一一對應的M個第一信息，其中，M為小于或等于K的正整數；

根據所述M個數據塊以及所述M個第一信息，從所述L個存儲節點中確定與所述M個數據塊中出現數據錯誤的第一數據塊對應的第一存儲節點；

向所述第一存儲節點發送第二請求，以使所述第一存儲節點重新發送所述第一數據塊。

本申請實施例中，存儲節點在向服務器發送數據塊，還同時發送該數據塊對應的第一信息，第一信息包括該數據塊所在存儲節點的信息，當服務器接收到相應的數據塊以及第一信息之后，如果某個數據塊傳輸出錯，服務器可以根據第一信息確定哪個存儲節點發送的該數據塊，從而直接讓對應的存儲節點重新發送該數據塊即可，相較于現有技術中一旦某個數據出錯，所有存儲節點都需要重新發送的技術方案，本申請實施例只需讓相應的存儲節點重新發送該數據塊即可，無需其余的存儲節點重傳，從而減少重傳過程中網絡傳輸負擔，同時減少了重傳的時間，提高了數據傳輸的效率。

可選的，根據所述M個數據塊以及所述M個第一信息，從所述L個存儲節點中確定與所述M個數據塊中出現數據錯誤的第一數據塊對應的第一存儲節點，包括：

將所述M個數據塊中的每個數據塊中攜帶的校驗碼與其攜帶的數據內容進行運算，獲得與所述M個數據塊中的每個數據塊對應的校驗值；