[發明專利]一種數據處理方法、裝置、設備及介質在審
| 申請號: | 202011181171.0 | 申請日: | 2020-10-29 |
| 公開(公告)號: | CN112286459A | 公開(公告)日: | 2021-01-29 |
| 發明(設計)人: | 張孫旻 | 申請(專利權)人: | 蘇州浪潮智能科技有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 北京集佳知識產權代理有限公司 11227 | 代理人: | 劉曉菲 |
| 地址: | 215100 江蘇省蘇州市吳*** | 國省代碼: | 江蘇;32 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據處理 方法 裝置 設備 介質 | ||
1.一種數據處理方法,其特征在于,包括:
將目標設備中各個存儲層上的已存儲數據劃分成大小相同的數據塊,并獲取各個所述數據塊的訪問信息,其中,所述目標設備包括多個存儲層,所述訪問信息包括過去預設時長之內的訪問次數和最近訪問時間戳;
根據所述訪問次數、所述最近訪問時間戳以及預設調整參數確定出各個所述數據塊的熱參數值,其中,所述熱參數值表示所述數據塊的熱度,所述熱參數值大小與數據塊的熱度呈正相關;
根據所述熱參數值分別確定出各個所述存儲層上的冷數據塊和熱數據塊;
將當前存儲層上的所述熱數據塊遷移存儲到存儲性能比當前存儲層高一級的存儲層,并將當前存儲層上的所述冷數據塊遷移存儲到存儲性能比當前存儲層低一級的存儲層。
2.根據權利要求1所述的數據處理方法,其特征在于,所述將當前存儲層上的所述冷數據塊遷移存儲到存儲性能比當前存儲層低一級的存儲層之后,還包括:
更新所述冷數據塊和所述熱數據塊對應的元數據。
3.根據權利要求1所述的數據處理方法,其特征在于,所述根據所述熱參數值分別確定出各個所述存儲層上的冷數據塊和熱數據塊,包括:
將當前存儲層上的數據塊的熱參數值按照從大到小順序進行排序,得到當前存儲層的熱參數值序列;
將所述熱參數值序列中最前面的第一預設數量個值對應的所述數據塊確定為熱數據塊,并將所述熱參數值序列中最后面的第一預設數量個值對應的所述數據塊確定為冷數據塊。
4.根據權利要求1所述的數據處理方法,其特征在于,所述根據所述熱參數值分別確定出各個所述存儲層上的冷數據塊和熱數據塊,包括:
將當前存儲層上大于第一預設閾值的所述熱參數值對應的所述數據塊確定為當前存儲層上的預選熱數據塊,并將小于第二預設閾值的所述熱參數值對應的所述數據塊確定為當前存儲層上的預選冷數據塊,其中,所述第一預設閾值大于所述第二預設閾值;
判斷所述預選熱數據塊的第一數據塊數量和所述預選冷數據塊的第二數據塊數量是否均大于第二預設數量;
如果是,則從所述預選熱數據塊中確定出數量與所述第二預設數量相等的熱數據塊,并從所述預選冷數據塊中確定出數量與所述第二預設數量相等的冷數據塊。
5.根據權利要求4所述的數據處理方法,其特征在于,所述從所述預選熱數據塊中確定出數量與所述第二預設數量相等的熱數據塊,包括:
將所述預選熱數據塊對應的所述熱參數值按照從大到小排序;
將最前面的所述第二預設數量個值對應的所述預選熱數據塊作為熱數據塊。
6.根據權利要求4所述的數據處理方法,其特征在于,所述從所述預選冷數據塊中確定出數量與所述第二預設數量相等的冷數據塊,包括:
將所述預選冷數據塊對應的所述熱參數值按照從小到大排序;
將最前面的所述第二預設數量個值對應的所述預選冷數據塊作為冷數據塊。
7.根據權利要求1至6任一項所述的數據處理方法,其特征在于,根據所述訪問次數、所述最近訪問時間戳以及預設調整參數確定出任一數據塊的熱參數值,包括:
利用第一預設調整參數對該數據塊的訪問次數進行加權,得到加權后訪問次數;
確定當前時間戳和該數據塊的最近訪問時間戳之間的時間差值;
利用第二預設調整參數和第三預設調整參數對所述時間差值的倒數進行加權,得到加權后時間差倒數,其中,所述第三預設調整參數為1與所述第一預設調整參數之間的差值;
將所述加權后訪問次數和所述加權后時間差倒數的和作為該數據塊的熱參數值。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于蘇州浪潮智能科技有限公司,未經蘇州浪潮智能科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011181171.0/1.html,轉載請聲明來源鉆瓜專利網。





