[發明專利]數據寫入方法、裝置及存儲服務器和計算機可讀存儲介質有效
| 申請號: | 201911304631.1 | 申請日: | 2019-12-17 |
| 公開(公告)號: | CN111104066B | 公開(公告)日: | 2021-07-27 |
| 發明(設計)人: | 張煜;周可;王樺;胡健鷹;吉永光 | 申請(專利權)人: | 華中科技大學;騰訊科技(深圳)有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 深圳市深佳知識產權代理事務所(普通合伙) 44285 | 代理人: | 王兆林 |
| 地址: | 430070 湖北*** | 國省代碼: | 湖北;42 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據 寫入 方法 裝置 存儲 服務器 計算機 可讀 介質 | ||
本申請公開了一種數據寫入方法、裝置及一種存儲服務器和計算機可讀存儲介質,該方法包括:當接收到寫入請求時,將所述寫入請求對應的寫入數據寫入寫緩沖區中;當觸發所述寫緩沖區的數據下刷操作時,獲取所述待下刷數據對應的數據塊的歷史訪問數據;基于所述歷史訪問數據判斷待下刷數據是否為只寫數據;若是,則將所述待下刷數據寫入硬盤驅動器中;若否,則將所述待下刷數據寫入緩存中。本申請提供的數據寫入方法,可以有效減少寫入緩存的無用流量,同時在緩存中為普通數據留出更多空間,提高緩存空間利用率,從而提高緩存的讀取命中率,提升存儲系統的讀性能,實現了對緩存的最低寫入流量,提高了寫策略的效率。
技術領域
本申請涉及存儲技術領域,更具體地說,涉及數據寫入方法、裝置及存儲服務器和計算機可讀存儲介質。
背景技術
當客戶端產生寫請求時,存儲服務器依據寫策略決定是否將待寫入數據加載到緩存以及何時將緩存中的臟數據下刷到后端的硬盤驅動器。因此,寫策略對系統性能、數據一致性以及對高速緩存介質的寫入流量具有很大影響。
在相關技術中,存在三個基本寫策略:寫穿策略(write-through)、寫回策略(write-back)和繞寫策略(write-around)。寫穿策略為將待寫入數據同時寫入緩存和后端的硬盤驅動器,寫回策略為將待寫入數據首先寫入緩存,然后異步下刷到后端的硬盤驅動器,繞寫策略為將待寫入數據直接寫后端的硬盤驅動器,只有當存在讀操作時才將未命中數據加載到緩存。
在不斷變化的多樣化云工作負載下,固定的寫策略注定是低效的。因此,如何提高寫策略的效率是本領域技術人員需要解決的技術問題。
發明內容
本申請的目的在于提供一種數據寫入方法、裝置及一種存儲服務器和一種計算機可讀存儲介質,提高寫策略的效率。
為實現上述目的,本申請第一方面提供了一種數據寫入方法,包括:
當接收到寫入請求時,將所述寫入請求對應的寫入數據寫入寫緩沖區中;
當觸發所述寫緩沖區的數據下刷操作時,獲取所述待下刷數據對應的數據塊的歷史訪問數據;
基于所述歷史訪問數據判斷待下刷數據是否為只寫數據;
若是,則將所述待下刷數據寫入硬盤驅動器中;
若否,則將所述待下刷數據寫入緩存中。
結合本申請的第一方面,在本申請第一方面的第一種實施方式中,所述基于所述歷史訪問數據判斷待下刷數據是否為只寫數據,包括:
在所述歷史訪問數據中提取所述待下刷數據對應的數據塊的特征信息作為第一特征信息,將所述第一特征信息輸入訓練完成的分類器中以便判斷待下刷數據是否為只寫數據。
結合本申請的第一方面的第一種實施方式,在本申請第一方面的第二種實施方式中,還包括:
當所述緩存觸發數據替換操作時,基于替換數據的歷史讀取數據對所述替換數據進行標記;
獲取所述替換數據對應的數據塊的特征信息作為第二特征信息,并利用標記完成的替換數據和所述第二特征信息訓練分類器得到所述訓練完成的分類器。
結合本申請的第一方面的第二種實施方式,在本申請第一方面的第三種實施方式中,所述獲取所述替換數據對應的數據塊的特征信息作為第二特征信息,包括:
確定所述替換數據對應的數據塊所屬的數據區域;其中,所述數據區域包括多個數據塊,所述數據區域的大小為訪問粒度的整數倍;
提取所述數據區域的特征信息作為所述第二特征信息。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于華中科技大學;騰訊科技(深圳)有限公司,未經華中科技大學;騰訊科技(深圳)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201911304631.1/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





