[發明專利]vod系統的數據訪問方法

有效

• 申請號: 201210539357.8
• 申請日: 2012-12-13
• 公開（公告）號: CN103108029A
• 公開（公告）日: 2013-05-15
• 發明（設計）人: 張森林;馮圣中
• 申請（專利權）人: 中國科學院深圳先進技術研究院
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 深圳市科進知識產權代理事務所(普通合伙) 44316
• 代理人: 宋鷹武

1.一種vod系統的數據訪問方法，其特征在于，所述方法為：

使用實現分級存儲功能的集群作為系統的數據存儲平臺。

2.根據權利要求1所述的vod系統的數據訪問方法，其特征在于，所述集群通過如下步驟實現分級存儲功能：

存儲自動分級：集群啟動，根據主機名將各個節點劃分為不同的存儲層次；

定向存取：選擇距離近、存儲層次高的空閑節點存儲和讀取文件；

監控數據訪問操作：記錄文件訪問信息，并判斷遷移時機是否到來，若遷移時機到來，則執行下述操作；

數據估值：根據訪問記錄，使用信息估值模型對數據進行估值；

數據遷移：根據所述數據的估值結果，判斷數據的位置是否滿足數據越熱存儲層次越高的特點，若不滿足，則進行數據遷移，使得數據的位置滿足數據越熱存儲層次越高的特點；

自適應調整：數據遷移完成后，根據遷移結果更新相關信息，重新啟動監控。

3.根據權利要求1所述的vod系統的數據訪問方法，其特征在于，在存儲自動分級時，所述存儲層次至少包括2級，存儲層次的劃分標準為：存儲層次越高，訪問性能越好，處理用戶請求的響應時間越短。

4.根據權利要求1所述的vod系統的數據訪問方法，其特征在于，所述信息估值模型中所用到的模型的建立方法為：

利用搜集到的文件訪問記錄進行建模，計算出一個反映數據熱度的數值，所述數值越大，說明所述數值對應的數據以后的訪問概率就越大。

5.根據權利要求1所述的vod系統的數據訪問方法，其特征在于，在數據遷移時，通過隊列過濾模型和路徑匹配模型，在信息估值模型處理后得到的數值隊列的基礎上，形成具體的數據遷移任務，利用遷移控制模型完成數據遷移。

6.根據權利要求5所述的vod系統的數據訪問方法，其特征在于，所述隊列過濾模型為：根據閾值過濾掉不需要遷移的數據分段，所述閾值反映了本存儲層次上前一次的遷移結果，過濾后形成的隊列中所有數據分段都已經確定遷移方向，所述遷移方向為全相連模式。

7.根據權利要求5所述的vod系統的數據訪問方法，其特征在于，所述路徑匹配模型為：在隊列中所有數據分段都確定了遷移方向后，如果系統中該數據分段有多個副本，確定距離較近的遷移源和遷移目標，遷移源優先選擇剩余空間較少、負載輕的節點，遷移目標優先選擇負載輕的節點。

8.根據權利要求5所述的vod系統的數據訪問方法，其特征在于，所述遷移控制模型為：進行遷移速率控制，使用多線程分批次執行所述數據遷移任務，降低遷移過程對集群中節點訪問性能的影響。

9.根據權利要求2所述的vod系統的數據訪問方法，其特征在于，所述根據遷移結果更新相關信息，重新啟動監控的步驟具體為：

存儲數據的估值結果，以備下一次估值時使用；

對于已經被刪除的數據，在系統所保留的訪問記錄中刪除；

根據遷移的實際情況進行各存儲層次的閾值更新；

喚醒監視進程，等待下一次數據遷移的到來。