[發明專利]一種存儲系統分層管理的方法與系統有效
| 申請號: | 201410064357.6 | 申請日: | 2014-02-25 |
| 公開(公告)號: | CN103914516B | 公開(公告)日: | 2017-09-08 |
| 發明(設計)人: | 張勤 | 申請(專利權)人: | 深圳市中博科創信息技術有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 深圳華奇信諾專利代理事務所(特殊普通合伙)44328 | 代理人: | 曲衛濤 |
| 地址: | 518057 廣東省深圳市*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 存儲系統 分層 管理 方法 系統 | ||
技術領域
本發明涉及分布式文件的存儲管理,尤其涉及的是,一種存儲系統分層管理的方法與系統。
背景技術
如今,非結構化數據增長的速度越來越快,隨著時間的推移,這種趨勢也越來越明顯。根據市場調查和分析,非結構化數據增長的速度已經超過了所有其他類型的數據。
結構化數據,比如CRM、ERP、financial等以一種平滑的方式增長。而非結構化數據,比如Emails、電子數據表、文件及其文件夾等,占了一個企業數據增長的50%-100%。
考慮到在現今行業的預算沒有增長甚至減少的情況下,智能管理數據的存儲方案的需求也越來越急迫。分析存儲系統中的一個數據對象,在它剛進入系統那段時間中可能會出現訪問頻率很高的現象,但當數據老舊或不再更新之后,幾乎不會再訪問它。
根據這種數據現象可以分析出在上面這種情形中當數據的體積越來越大時其訪問的頻率越來越小。所以,在數據的生命周期中,由于成本原因,不能一直放在高性能的存儲介質(SAS RAID或SSD)中,應該依據不同時期的訪問頻率來移動到不同的物理介質當中。這就需要在存儲軟件中用到合適的分層方法來管理數據的遷移和存儲。
不論什么自動分層方法都需要結合不同的存儲介質來完成,下面是現有存儲介質的概述:
SSD(Solid State Disk,固態硬盤,簡稱固盤),是用固態電子存儲芯片陣列而制成的硬盤,高性能也伴隨著高成本,通常在分層存儲中存放活躍數據。
SAS(Serial Attached SCSI,串行連接SCSI)/FC(Fibre Channel,光纖通道接口)Disks,由SAN或FC盤組成的獨立硬盤冗余陣列(RAID,Redundant Array of Independent Disks)的性能雖然沒有SSD的好,但屬于現在主流的存儲介質,不過成本依舊很高。
SATA(Serial Advanced Technology Attachment,串行高級技術附件)Disks,相比于SAS/FC Disks,SATA Disk的性能低一些,但是性價比很高。
LTO(Linear Tape Open,線性磁帶開放協議)Tape(磁帶),其在TB級的存儲上擁有最高的性價比,但是它沒有提供隨機存儲的能力使其無法成為主要的存儲介質,一般用作拷貝和歸檔。
發明內容
本發明所要解決的技術問題是提供一種新的存儲系統分層管理的方法與系統。
本發明的技術方案如下:一種存儲系統分層管理的方法,其包括以下步驟:根據存儲系統中各存儲介質的介質類型,將各存儲介質分成至少二存儲層;根據數據對象的數據類型,將所述數據對象存儲在相應的存儲層。
優選的,所述方法還根據數據對象的訪問頻率,將所述數據對象在各存儲層中遷移。
優選的,所述方法中,將各存儲介質分成N存儲層,其中,N為自然數且N≥2;預設置N-1個訪問頻率的閾值;周期對某一數據對象作遷移判斷:判斷其訪問頻率大于第M閾值時,將其從第M存儲層遷移至第M+1存儲層,否則,判斷其訪問頻率小于第M閾值時,將其從第M+1存儲層遷移至第M存儲層,其中,M為自然數且M≤N-1。
優選的,所述方法中,根據所述存儲系統中所有數據對象的訪問總頻率調整各閾值。
優選的,所述方法中,在所述遷移判斷時,采用所述數據對象在一預設時間段內的平均訪問頻率作為判斷時采用的訪問頻率。
優選的,所述方法中,所述數據對象在遷移后,還在原存儲層中保留一預設時間。
優選的,所述方法還包括步驟:根據數據對象的數據類型設置若干對應相異存儲層的數據對象級別;當數據對象進入存儲系統時,根據所述數據對象的數據類型,獲取所述數據對象的數據對象級別,根據所述數據對象級別將其存儲到對應的存儲層。
優選的,所述方法中,所述數據對象在遷移到第1層時,選擇是否分配一預設的租期;對于具有所述租期的所述數據對象,判斷其在所述租期內未被訪問,則在所述租期到期后,將所述數據對象刪除。
優選的,所述方法還包括步驟:根據各存儲層的負載情況,對于負載程度超過預設百分比值的第X存儲層,根據各數據對象的平均訪問頻率,將平均訪問頻率最高的數據對象遷移至第X+1存儲層,繼續判斷第X存儲層的負載程度是否超過預設百分比值,是則將平均訪問頻率最低的數據對象遷移至第X-1存儲層,直至第X存儲層的負載程度低于所述預設百分比值。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于深圳市中博科創信息技術有限公司,未經深圳市中博科創信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201410064357.6/2.html,轉載請聲明來源鉆瓜專利網。





