[發明專利]熱點數據確定方法、設備及裝置有效
| 申請號: | 201611080936.5 | 申請日: | 2016-11-30 |
| 公開(公告)號: | CN106775461B | 公開(公告)日: | 2020-01-21 |
| 發明(設計)人: | 安通鑒;涂劍洪;蔣海嘯;郟維強 | 申請(專利權)人: | 華為技術有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 11138 北京三高永信知識產權代理有限責任公司 | 代理人: | 羅振安 |
| 地址: | 518129 廣東*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 熱點 數據 確定 方法 設備 裝置 | ||
本發明公開了一種熱點數據確定方法,屬于存儲技術領域。該方法包括:獲取歷史數據訪問記錄,該歷史數據訪問記錄用于指示存儲設備中的各個數據段各自的相鄰兩次被訪問的時間間隔;根據該各個數據段各自的相鄰兩次被訪問的時間間隔確定時間間隔閾值;對于該各個數據段中的每一個數據段,當該數據段的相鄰兩次被訪問的時間間隔與該時間間隔閾值滿足預設條件時,將該數據段中的數據確定為熱點數據。該方法按照存儲設備中的各個數據段各自的相鄰兩次被訪問的時間間隔來確定時間間隔閾值,能夠提高熱點數據確定的準確性。
技術領域
本發明涉及數據存儲技術領域,特別涉及一種熱點數據確定方法,用于執行該熱點數據確定方法的管理設備及裝置。
背景技術
在存儲系統中,被頻繁訪問的數據被稱為熱點數據,而確定存儲系統中的熱點數據,對于存儲系統中的許多功能都有著重要的影響。
比如,在支持緩存機制的存儲系統中,可以將熱點數據存放在讀寫速度較快的緩存單元中,以達到降低存儲系統的訪問時延,提高每秒進行讀寫操作的次數(input outputoperations per second,IOPS)的效果。
在現有技術中,存儲系統可以通過一個數據段相鄰兩次被訪問的時間間隔來確定該數據段中的數據是否為熱點數據。比如,存儲系統預先設置一個固定的時間間隔閾值,當一個數據段最近兩次被訪問的時間間隔小于該時間間隔閾值時,可以確定該數據段中的數據為熱點數據。
在存儲系統中,不同時間段的讀寫業務可能不同,對應的讀寫特征也可能不同,而現有技術中通過固定的時間間隔閾值來確定熱點數據的方法,會導致不同時間段內確定的熱點數據的數量偏差比較大,從而對依賴熱點數據確定的相關功能產生負面影響。比如,以將熱點數據存放在緩存單元中為例,當確定出的熱點數據的數量較少時,緩存單元的空間利用率較低,而當確定出的熱點數據的數量較多時,則可能會導致緩存單元的空間不足。
發明內容
本申請提供了一種熱點數據確定方法,以提升熱點數據的判斷精度。
第一方面,本申請提供了一種熱點數據確定方法,包括:獲取歷史數據訪問記錄,所述歷史數據訪問記錄用于指示存儲設備中的各個數據段各自的相鄰兩次被訪問的時間間隔;根據所述各個數據段各自的相鄰兩次被訪問的時間間隔確定時間間隔閾值;對于所述各個數據段中的每一個數據段,當所述數據段的相鄰兩次被訪問的時間間隔與所述時間間隔閾值滿足預設條件時,將所述數據段中的數據確定為熱點數據;其中,所述預設條件包括:所述數據段最近一次被訪問的時間距離上一次被訪問的時間之間的間隔小于所述時間間隔閾值;或者,所述數據段最近N次被訪問的時間距離各自對應的上一次被訪問的時間之間的間隔的平均值小于所述時間間隔閾值。
本申請所示的方案,按照存儲設備中的各個數據段各自的相鄰兩次被訪問的時間間隔來確定時間間隔閾值,能夠盡可能的縮小不同時間段內確定的熱點數據的數量偏差,提高熱點數據確定的準確性,避免對依賴熱點數據確定的相關功能產生負面影響,從而達到提高存儲系統的系統性能的效果。
可選的,所述根據所述各個數據段各自的相鄰兩次被訪問的時間間隔確定時間間隔閾值,包括:對所述各個數據段各自的相鄰兩次被訪問的時間間隔進行統計,獲得時間間隔統計信息,所述時間間隔統計信息中包含預先設置的若干個時間間隔區間以及所述若干個時間間隔區間各自對應的訪問次數,所述訪問次數是所述各個數據段被訪問的時間距離各自的上一次被訪問的時間之間的間隔處于對應的時間間隔區間內的被訪問的次數;根據所述時間間隔統計信息確定所述若干個時間間隔區間中的臨界區間,所述臨界區間以及對應的時間間隔小于所述臨界區間的時間間隔的各個時間間隔區間的訪問次數之和占總訪問次數的比例大于或者等于第一比例閾值,且所述臨界區間以及對應的時間間隔大于所述臨界區間的時間間隔的各個時間間隔區間的訪問次數之和占總訪問次數的比例大于或者等于所述第一比例閾值;根據所述臨界區間對應的時間間隔確定所述時間間隔閾值。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于華為技術有限公司,未經華為技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201611080936.5/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





