[發明專利]一種分級存儲方法及裝置

有效

• 申請號: 201310586012.2
• 申請日: 2013-11-19
• 公開（公告）號: CN104657286B
• 公開（公告）日: 2019-05-10
• 發明（設計）人: 周揚
• 申請（專利權）人: 中興通訊股份有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 工業和信息化部電子專利中心 11010
• 代理人: 梁軍

本發明公開了一種分級存儲方法及裝置。其中，該方法包括：基于數據動態分級策略，決定不同條件下觸發數據的遷移；基于文件關聯規則挖掘技術，將文件相互關聯；其中，相互關聯的文件用于自動預取；基于遷移速率控制機制，最大化數據的遷移速度。通過本發明，基于數據動態分級策略，決定不同條件下觸發數據的遷移；基于文件關聯規則挖掘技術，將文件相互關聯；其中，相互關聯的文件用于自動預取；基于遷移速率控制機制，最大化數據的遷移速度。解決了相關技術中分級管理方法無法在在線存儲和近線存儲之間靈活遷移數據的問題，從而能夠更加靈活的控制回遷的觸發，能夠靈活配置分級管理策略，在在線存儲和近線存儲之間靈活的遷移數據。

技術領域

本發明涉及計算機存儲系統領域，特別是涉及一種分級存儲方法及裝置。

背景技術

分級存儲管理指的是在物理上，存儲設備依據價格、性能或其他屬性被區分為多種不同的類別，而數據依據其訪問活動或者其他特性，動態的在不同類別的存儲設備間遷移的存儲系統。與傳統的存儲系統相比，分級存儲系統將具有不同性能、容量、價格的設備整合在一起，提供高性能、大容量、低價格的存儲環境。

在一般的分級存儲系統中，包括三個層級：在線存儲，近線存儲和離線存儲。其中在線存儲使用的是高性能的磁盤，如SSD和FC盤。在線存儲存放少量的具有較高價值和訪問頻率的數據，相比而言，這些存儲設備性能好，存取速度快，訪問在線存儲中的數據，能夠滿足應用對高性能的要求。近線存儲存放不太活躍的數據，由于SATA盤具有較大的容量、較低的價格和較低的性能，適于應用于近線存儲中。而上層應用對近線存儲中的訪問較少，所以對系統整體性能的影響并不大。離線存儲設備一般使用的是磁帶或磁帶庫，其主要目的是用于存儲在線存儲和近線存儲中數據的備份或歸檔的數據。離線存儲數據的讀取往往需要比較長的時間，而且也幾乎不會對離線存儲數據進行訪問。

現有的分級存儲系統主要是針對備份應用（將冷數據從在線存儲遷移到近線或者離線存儲上）或者緩存應用（將近線存儲上變熱的數據遷移到在線存儲以提高性能），較少有二者兼顧的設計。這些設計存在的問題在于，系統在數據分級之后，數據的回遷會產生性能較低的問題。例如，對于一些訪問頻率不高的冷數據，可能在分級時被從在線存儲遷移到近線或者離線存儲上，該數據被再次訪問時，現有系統一般有兩種解決方法：1）提前通過預取提前對該數據進行了回遷，這種方法預測的時間一般較短，且可能存在不準確的問題；2）觸發該數據的回遷，這樣的回遷可能是沒有必要的，因為這些數據可能只是一次性訪問，回遷的代價較大。

針對相關技術中分級管理方法無法在在線存儲和近線存儲之間靈活遷移數據的問題，目前尚未提出有效的解決方案。

發明內容

針對相關技術中分級管理方法無法在在線存儲和近線存儲之間靈活遷移數據的問題，本發明提供了一種分級存儲方法及裝置，用以解決上述技術問題。

根據本發明的一個方面，本發明提供了一種分級存儲方法，其中，該方法包括：基于數據動態分級策略，決定不同條件下觸發數據的遷移；基于文件關聯規則挖掘技術，將文件相互關聯；其中，相互關聯的文件用于自動預取；基于遷移速率控制機制，最大化數據的遷移速度。

優選地，基于數據動態分級策略，決定不同條件下觸發數據的遷移包括：基于數據動態分級策略，進行數據分級操作；其中，上述數據分級操作包括文件升級操作和文件降級操作；基于數據分級操作，決定不同條件下觸發數據的遷移。

優選地，基于數據動態分級策略，進行文件升級操作包括：根據文件升級后單位時間內被訪問的數據量，衡量文件升級的收益效率；根據上述文件升級的收益效率和文件升級的成本，確定數據升級的單位成本收益效率；根據上述數據升級的單位成本收益效率，判斷文件的升級效用值是否高于升級閾值；如果是，則對文件執行升級操作。