[發明專利]基于分布式文件系統的多副本讀取方法、設備及存儲介質在審
| 申請號: | 201711076732.9 | 申請日: | 2017-11-06 |
| 公開(公告)號: | CN110019086A | 公開(公告)日: | 2019-07-16 |
| 發明(設計)人: | 歐陽偉 | 申請(專利權)人: | 中興通訊股份有限公司 |
| 主分類號: | G06F16/182 | 分類號: | G06F16/182;G06F16/172;G06F11/14 |
| 代理公司: | 工業和信息化部電子專利中心 11010 | 代理人: | 于金平 |
| 地址: | 518057 廣東省深圳市南山*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 讀取 副本數據 分布式文件系統 存儲節點 存儲介質 調用 副本 副本存儲 節點獲取 用戶體驗 讀性能 容錯性 云存儲 失敗 安全 保證 | ||
1.一種基于分布式文件系統的多副本讀取方法,其特征在于,包括:
調用sendfile接口在本地存儲節點讀取副本數據;
當調用sendfile接口在本地存儲節點讀取副本數據失敗時,通過writev接口從其他副本存儲節點獲取所述副本數據。
2.根據權利要求1所述的方法,其特征在于,所述調用sendfile接口在本地存儲節點讀取副本數據,包括:
獲取源文件句柄;
根據所述源文件句柄確定所要讀取的副本數據的物理塊句柄;
通過調用sendfile接口讀取所述物理塊句柄中的副本數據。
3.根據權利要求2所述的方法,其特征在于,所述根據所述源文件句柄確定所要讀取的副本數據的物理塊句柄,包括:
判斷所述源文件句柄是本地句柄還是云存儲句柄;
當判斷所述源文件句柄為云存儲句柄時,根據所述源文件句柄確定所要讀取的副本數據的物理塊句柄。
4.根據權利要求3所述的方法,其特征在于,所述判斷源文件句柄是本地句柄還是云存儲句柄,包括:
當所述源文件句柄數量大于預設閾值時,則判定所述源文件句柄為云存儲句柄;
當所述源文件句柄數量小于或等于預設閾值時,則判定所述源文件句柄為本地句柄。
5.根據權利要求2所述的方法,其特征在于,所述根據所述源文件句柄確定所要讀取的副本數據的物理塊句柄,包括:
根據預先存儲于元數據服務器中文件句柄與物理塊句柄的映射關系獲取所述源文件句柄所對應的物理塊句柄。
6.根據權利要求2~5任一項所述的方法,其特征在于,在獲取源文件句柄之后,所述方法還包括:
根據偏移位置和副本數據的字節數計算所述物理塊的索引,以根據所述索引確定所述物理塊的位置;
所述通過調用sendfile接口讀取所述物理塊句柄中的副本數據,包括:
根據所述物理塊句柄,從所述物理塊的位置讀取所述副本數據。
7.根據權利要求1所述的方法,其特征在于,所述通過writev接口從其他副本存儲節點獲取所述副本數據,包括:
調用read接口從所述其他副本存儲節點讀取所述副本數據,通過writev接口將所述副本數據存儲至writev數組中;
當所述writev數組達到預設個數后,將所述writev數組中的數據一次寫入目標文件的緩存中。
8.一種基于分布式文件系統的多副本讀取設備,其特征在于,包括存儲器和處理器;其中,所述存儲器中存儲有計算機指令;當所述計算機指令被所述處理器執行時,用以實現權利要求1~7任一項所述的方法。
9.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質存儲有一個或者多個程序,當所述一個或者多個程序被一個或者多個處理器執行時,以實現權利要求1~7任一項所述的方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于中興通訊股份有限公司,未經中興通訊股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201711076732.9/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種基于HBase的分布式時序數據庫
- 下一篇:數據處理方法及其系統





