[發明專利]一種用于分級存儲的數據遷移方法及系統

在審

• 申請號: 201810256983.3
• 申請日: 2018-03-27
• 公開（公告）號: CN108491165A
• 公開（公告）日: 2018-09-04
• 發明（設計）人: 張欣雨;王勇;余志天;趙博漢;卞乃文;楊文龍
• 申請（專利權）人: 中國農業銀行股份有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 古利蘭;王寶筠

本申請公開了一種用于分級存儲的數據遷移方法，步驟A：以預設周期比較在線存儲設備中已使用空間的占比是否大于或等于第一預設閾值，若是，執行步驟B，否則，重新執行步驟A；步驟B：當在線存儲設備中的已使用空間占比大于或等于第一預設閾值時，獲取在線存儲設備中所有數據表的屬性信息，執行步驟C；步驟C：基于屬性信息計算所有數據表的遷移值，執行步驟D；步驟D：遷移在線存儲設備中遷移值最大的數據表對應的數據至離線存儲設備，執行步驟E；步驟E：比較在線存儲設備中已使用空間的占比是否小于或等于第二預設閾值，若是，執行步驟A，否則，執行步驟D。本申請實現了遷移速度快、釋放空間大、影響范圍小、訪問效率高的目的。

技術領域

本申請涉及數據存儲技術領域，尤其涉及一種用于分級存儲的數據遷移方法及系統。

背景技術

分級存儲策略是指將數據存儲在不同性能級別的存儲設備，一般而言，將訪問頻率高、日期近、價值高的數據存儲于在線存儲設備中，以保證訪問效率；將訪問頻率低、日期遠、價值低的數據存儲與離線存儲設備中，以降低存儲成本。通過分級存儲管理軟件實現數據在存儲設備之間的自動遷移，數據遷移的規則可以人為控制也可以根據一定的規則自動執行，遷移時機選擇通常是根據數據的訪問率、容量、性能要求等因素確定的。

現有數據遷移方案中，一般僅根據數據規模、使用頻率決定是否遷移，并按照隨機順序進行遷移。現有技術中的方案僅根據規模、使用頻率，忽略數據的遷移耗時、更新頻率、數據關聯度、應用系統打分等其他屬性，會造成遷移效率低，存儲成本高，訪問時間長。

因此，如何提高數據遷移的效率，降低存儲成本，降低訪問時間，成為了本領域技術人員亟需解決的問題。

發明內容

有鑒于此，本申請提供了本申請提出一種將數據從在線存儲設備遷移至離線存儲設備的技術方案，以達到遷移速度快、釋放空間大、影響范圍小、訪問效率高的目的。

本申請提供了一種用于分級存儲的數據遷移方法，包括：

步驟A：以預設周期比較在線存儲設備中已使用空間的占比是否大于或等于第一預設閾值，若是，執行步驟B，否則，重新執行步驟A；

步驟B：當所述在線存儲設備中的已使用空間占比大于或等于第一預設閾值時，獲取所述在線存儲設備中所有數據表的屬性信息，執行步驟C；

步驟C：基于所述屬性信息計算所有數據表的遷移值，執行步驟D；

步驟D：遷移在線存儲設備中遷移值最大的數據表對應的數據至離線存儲設備，執行步驟E；

步驟E：比較在線存儲設備中已使用空間的占比是否小于或等于第二預設閾值，若是，執行步驟A，否則，執行步驟D。

優選地，所述屬性信息包括日均增長量、遷移耗時、更新頻率、數據關聯度及應用系統打分。

優選地，所述基于所述屬性信息計算所有數據表的遷移值包括：

將所述日均增長量、遷移耗時、更新頻率、數據關聯度及應用系統打分進行標準化處理；

基于所述日均增長量、遷移耗時、更新頻率、數據關聯度及應用系統打分計算所有數據表的遷移值。

優選地，遷移值＝4日均增長量-3遷移耗時-2更新頻率-1數據關聯度-1應用系統打分。

優選地，所述第一預設閾值為80％，所述第二預設閾值為60％。

一種用于分級存儲的數據遷移系統，包括比較模塊、信息獲取模塊、計算模塊及遷移模塊，其中：

所述比較模塊用于以預設周期比較在線存儲設備中已使用空間的占比是否大于或等于第一預設閾值；