[發明專利]一種基于分布式存儲的數據處理方法及裝置

在審

• 申請號: 202011339302.3
• 申請日: 2020-11-25
• 公開（公告）號: CN112596669A
• 公開（公告）日: 2021-04-02
• 發明（設計）人: 鐘晉明;彭洪淵;管樹發
• 申請（專利權）人: 新華三云計算技術有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;H04L29/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于分布式存儲的數據處理方法，其特征在于，所述分布式存儲中各存儲節點分別配置有對應的智能網卡，各智能網卡上運行分布式存儲服務，所述各智能網卡分別與其對應的存儲節點上用于管理本地存儲資源的控制器建立數據通道，所述方法包括：

智能網卡接收客戶端發送的數據讀寫請求；

所述智能網卡向其對應的存儲節點上用于管理本地存儲資源的控制器轉發所述數據讀寫請求，以使得所述控制器通過其對應的數據通道對所述數據讀寫請求進行數據處理，并將處理結果發送至所述智能網卡；

所述智能網卡接收所述控制器發送的處理結果，并將所述處理結果轉發至所述客戶端。

2.如權利要求1所述的方法，其特征在于，智能網卡接收客戶端發送的數據讀寫請求之前，所述方法還包括：

智能網卡基于用戶配置進行初始化操作，以使得所述智能網卡運行分布式存儲服務，并使得所述智能網卡與其對應的存儲節點上用于管理本地存儲資源的控制器建立數據通道。

3.如權利要求2所述的方法，其特征在于，智能網卡基于用戶配置進行初始化操作，以使得所述智能網卡運行分布式存儲服務的步驟包括：

智能網卡基于用戶下發的配置指令，在本地運行分布式存儲服務，并與其它運行有分布式存儲服務的智能網卡組成分布式存儲服務集群。

4.如權利要求2所述的方法，其特征在于，智能網卡基于用戶配置進行初始化操作，以使得所述智能網卡與其對應的存儲節點上用于管理本地存儲資源的控制器建立數據通道的步驟包括：

智能網卡基于用戶下發的配置命令，在本地配置NVMe over Fabrics協議，作為initiator端與其對應的存儲節點上用于管理本地存儲資源的控制器建立遠程直接數據存取RDMA數據通道，其中，所述智能網卡對應的存儲節點上用于管理本地存儲資源的控制器被配置為NVMe over Fabrics協議的target端。

5.如權利要求4所述的方法，其特征在于，智能網卡基于用戶下發的配置命令，在本地配置NVMe over Fabrics協議，作為initiator端與其對應的存儲節點上用于管理本地存儲資源的控制器建立遠程直接數據存取RDMA數據通道的步驟包括：

智能網卡基于用戶下發的配置命令，在本地配置RDMA的IP地址，作為initiator端，使用NVMe over Fabrics協議中的initiator工具連接其對應的存儲節點上用于管理本地存儲資源的控制器；其中，所述智能網卡對應的存儲節點上用于管理本地存儲資源的控制器基于用戶下發的配置命令，在本地具有RDMA能力的網卡芯片接口上配置RDMA的IP地址，并在具有NVMe-oF target offlad能力的網卡芯片上配置NVMe over Fabrics協議，作為target端。

6.一種基于分布式存儲的數據處理裝置，其特征在于，所述分布式存儲中各存儲節點分別配置有對應的所述裝置，各所述裝置上運行分布式存儲服務，所述各所述裝置分別與其對應的存儲節點上用于管理本地存儲資源的控制器建立數據通道，所述裝置包括：

第一接收單元，用于接收客戶端發送的數據讀寫請求；

轉發單元，用于向其對應的存儲節點上用于管理本地存儲資源的控制器轉發所述數據讀寫請求，以使得所述控制器通過其對應的數據通道對所述數據讀寫請求進行數據處理，并將處理結果發送至所述裝置；

第二接收單元，用于接收所述控制器發送的處理結果，并將所述處理結果轉發至所述客戶端。

7.如權利要求6所述的裝置，其特征在于，所述裝置還包括：

初始化單元，用于基于用戶配置進行初始化操作，以使得所述裝置運行分布式存儲服務，并使得所述裝置與其對應的存儲節點上用于管理本地存儲資源的控制器建立數據通道。

8.如權利要求7所述的裝置，其特征在于，基于用戶配置進行初始化操作，以使得所述裝置運行分布式存儲服務時，所述初始化單元具體用于：

基于用戶下發的配置指令，在本地運行分布式存儲服務，并與其它運行有分布式存儲服務的所述裝置組成分布式存儲服務集群。