[發明專利]一種基于分布式文件系統的數據訪問方法和裝置

有效

• 申請號: 201811521787.0
• 申請日: 2018-12-13
• 公開（公告）號: CN109783462B
• 公開（公告）日: 2021-01-05
• 發明（設計）人: 陽小鮮;劉力
• 申請（專利權）人: 創新科技術有限公司
• 主分類號: G06F16/182
• 分類號: G06F16/182;G06F16/13
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 謝安昆;宋志強

1.一種基于分布式文件系統的數據訪問方法，其特征在于，所述分布式文件系統中包括多個客戶端設備、元數據服務器、和多個存儲服務節點，其中，每個客戶端設備的每一網口配置有獨立IP地址，每個存儲服務節點的每一網口配置有獨立IP地址；該方法應用于任一客戶端設備，包括：

預先基于該客戶端設備中各網口的IP地址和每個存儲服務節點中的各網口的IP地址，建立該客戶端設備到每個存儲服務節點的IP連接池；

接收用戶的數據訪問請求；

從元數據服務器獲取該數據訪問請求的目標數據的起始地址和長度，根據該目標數據的起始地址和長度將該目標數據切分為多個目標數據塊；

針對該數據訪問請求的每一目標數據塊，向元數據服務器請求該目標數據塊所在存儲服務地址，基于該客戶端設備到該存儲服務地址所在存儲服務節點的IP連接池，對該存儲服務地址的目標數據塊進行訪問。

2.根據權利要求1所述的方法，其特征在于，

基于該客戶端設備中各網口的IP地址和每個存儲服務節點中的各網口的IP地址，建立該客戶端設備到每個存儲服務節點的IP連接池，包括：

針對每個存儲服務節點，執行以下操作：

利用該客戶端設備中每一網口的IP地址和該存儲服務節點中的每一網口的IP地址，建立該客戶端設備中每一網口與該存儲服務節點中的每一網口之間的IP鏈接；

將該客戶端設備中所有網口與該存儲服務節點中的每一網口之間的IP連接加入到該客戶端設備到該存儲服務節點的IP連接池。

3.根據權利要求2所述的方法，其特征在于，

從元數據服務器獲取該數據訪問請求的目標數據的起始地址和長度，根據該目標數據的起始地址和長度將該目標數據切分為多個目標數據塊的方法為：

將該數據訪問請求攜帶的目標數據信息發送到元數據服務器，接收元數據服務器根據該目標數據信息確定并返回的該目標數據的起始地址和長度信息；

根據目標數據的長度信息，將該目標數據按照預設數據塊大小分成多個目標數據塊，根據每個目標數據塊與目標數據的起始地址的偏移確定該目標數據塊的起始地址，并基于該目標數據塊的起始地址確定該目標數據塊的標識id；

向元數據服務器請求該目標數據塊所在存儲服務地址的方法為：將該目標數據塊的id發送到元數據服務器，接收元數據服務器根據該目標數據塊的id確定并返回的該目標數據塊所在存儲服務地址。

4.根據權利要求2所述方法，其特征在于，

基于該客戶端設備到該存儲服務地址所在存儲服務節點的IP連接池，對該存儲服務地址的目標數據塊進行訪問的方法為：

從該客戶端設備到該存儲服務地址所在存儲服務節點的IP連接池中選擇一IP連接，利用該IP連接對該存儲服務地址的目標數據塊進行訪問。

5.根據權利要求4所述的方法，其特征在于，

從該客戶端設備到該存儲服務地址所在存儲服務節點的IP連接池中選擇一IP連接之后，利用該IP連接對該存儲服務地址中的目標數據塊進行訪問時，如果該IP連接斷開，則在該IP連接池中重新選擇一未斷開的IP連接，利用重新選擇的IP連接對該存儲服務地址的目標數據塊進行訪問。

6.根據權利要求4或5所述的方法，其特征在于，

所述數據訪問請求包括寫數據請求和讀數據請求；

利用該IP連接對該存儲服務地址的目標數據塊進行訪問操作，包括：

當所述數據訪問請求是寫數據請求時，利用該IP連接對該存儲服務地址中的目標數據塊進行寫數據操作；

當所述數據訪問請求是讀數據請求時，利用該IP連接對該存儲服務地址中的目標數據塊進行讀數據操作。

7.根據權利要求5所述的方法，其特征在于，

基于該客戶端設備到該存儲服務地址所在存儲服務節點的IP連接池，對該存儲服務地址中的目標數據塊進行訪問時，如果該IP連接池中的所有IP連接均斷開，則基于預設重試次數，重試建立該IP連接池中的所有IP連接。