[發明專利]一種分布式存儲QOS的實現方法

在審

• 申請號: 202010551837.0
• 申請日: 2020-06-17
• 公開（公告）號: CN111708494A
• 公開（公告）日: 2020-09-25
• 發明（設計）人: 祝乃國
• 申請（專利權）人: 浪潮云信息技術股份公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F16/172;G06F16/182
• 代理公司: 濟南信達專利事務所有限公司 37100
• 代理人: 姜明

本發明涉及分布式存儲領域，具體提供了一種分布式存儲QOS的實現方法，該方法的步驟為，S01、分布式存儲運行性能體系建立及獲取；S02、分布式存儲QOS實現；S03、分布式存儲CAP均衡實現。與現有技術相比，本發明硬件介質確定的前提下，改善了分布式存儲的整體性能,并且可通過客戶、應用等條件控制讀寫速率，提高用戶的使用體驗和感受，提升用戶滿意度，具有良好的推廣價值。

技術領域

本發明涉及分布式存儲領域，具體提供一種分布式存儲QoS的實現方法。

背景技術

分布式存儲是相對集中存儲提出的概念,就是以大容量硬盤的服務器為存儲介質,通過軟件管理形成存儲供用戶使用。分布式存儲可以提供各種訪問協議，可以支持塊和對象等存儲模式。

分布式存儲的基礎是通過分區容錯來提升數據持久化的穩定性，如在三副本情況下理論計算可以到9個9的存儲穩定性，并且為了保持這個穩定性的可用一般使用強一致性來保障。

所謂多副本以及強一致性，都以分布式存儲的數據讀寫原理為基礎。一般分布式存儲要存儲一份數據，對用戶來說是通過文件形式來表示。而要存儲文件，分布式存儲一般會把文件按照設置的讀寫數據塊大小進行切分，形成數據單元。利用一定的算法計算這些數據單元可以存儲的位置點，然后進行讀寫即可完成數據的持久化存儲。

在三副本處理工程中，存在以下缺點：

上層應用在主副本全部完成時才會收到結束的標識，傳輸線路長；

都有自動分配及故障時恢復機制，但都基于數據單元本身，沒有優先級順序；

如果3T的硬盤損壞，要做到數據重新一致性完成，測試需耗時4小時以上，在這個過程里讀寫會受影響。

副本數一般為奇數，選舉時容易出現腦裂，無法確定主本。

從以上過程可以看出，分布式存儲作為一種存儲的技術模式，與傳統的集中存儲相比，在性能上仍有差距，所以優化并提升分布式存儲整體性能是本領域技術人員亟待解決的問題。

發明內容

本發明是針對上述現有技術的不足，提供一種實用性強的分布式存儲QoS 的實現方法。

本發明解決其技術問題所采用的技術方案是：

一種分布式存儲QOS的實現方法，該方法的步驟為，

S01、分布式存儲運行性能體系建立及獲??；

S02、分布式存儲QOS實現；

S03、分布式存儲CAP均衡實現。

進一步的，在步驟S01中，通過在分布式存儲軟件中增加原子單元的讀寫操作記錄，結合原子單元所屬的文件或歸屬的其他粒度，統計出冷熱文件、原子單元操作頻次和發生容量，并將這些指標應用到步驟S02中。

作為優選，所述原子單元的操作記錄包括標志、時間和耗時長。

進一步的，在步驟S02中，包括：

S021、排定各待處理文件的優先級；

S022、按照優先級執行順序操作。

進一步的，在步驟S021前，首先，將文件按照系統缺省設置的讀寫塊大小拆分為等大小的數據塊，最后一個可以為不是等大小的數據塊；

然后，通過哈希算法獲得每個數據塊寫入磁盤的位置；

最后，在磁盤上執行寫入或讀取。

進一步的，在步驟S021中，對輸入的相關信息計算獲得一個優先級數字，所述數字與后續調用一起傳遞給最終執行程序。