[發(fā)明專(zhuān)利]數(shù)據(jù)寫(xiě)入方法、裝置及存儲(chǔ)服務(wù)器和計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201911304631.1
• 申請(qǐng)日: 2019-12-17
• 公開(kāi)（公告）號(hào): CN111104066B
• 公開(kāi)（公告）日: 2021-07-27
• 發(fā)明（設(shè)計(jì)）人: 張煜;周可;王樺;胡健鷹;吉永光
• 申請(qǐng)（專(zhuān)利權(quán)）人: 華中科技大學(xué);騰訊科技（深圳）有限公司
• 主分類(lèi)號(hào): G06F3/06
• 分類(lèi)號(hào): G06F3/06
• 代理公司: 深圳市深佳知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44285
• 代理人: 王兆林

1.一種數(shù)據(jù)寫(xiě)入方法，其特征在于，包括：

當(dāng)接收到寫(xiě)入請(qǐng)求時(shí)，將所述寫(xiě)入請(qǐng)求對(duì)應(yīng)的寫(xiě)入數(shù)據(jù)寫(xiě)入寫(xiě)緩沖區(qū)中；

當(dāng)觸發(fā)所述寫(xiě)緩沖區(qū)的數(shù)據(jù)下刷操作時(shí)，獲取待下刷數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊的歷史訪問(wèn)數(shù)據(jù)；

基于所述歷史訪問(wèn)數(shù)據(jù)判斷所述待下刷數(shù)據(jù)是否為只寫(xiě)數(shù)據(jù)；

若是，則將所述待下刷數(shù)據(jù)寫(xiě)入硬盤(pán)驅(qū)動(dòng)器中；

若否，則將所述待下刷數(shù)據(jù)寫(xiě)入緩存中；

其中，所述基于所述歷史訪問(wèn)數(shù)據(jù)判斷待下刷數(shù)據(jù)是否為只寫(xiě)數(shù)據(jù)，包括：

在所述歷史訪問(wèn)數(shù)據(jù)中提取所述待下刷數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊的特征信息作為第一特征信息，將所述第一特征信息輸入訓(xùn)練完成的分類(lèi)器中以便判斷待下刷數(shù)據(jù)是否為只寫(xiě)數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述數(shù)據(jù)寫(xiě)入方法，其特征在于，將所述待下刷數(shù)據(jù)寫(xiě)入硬盤(pán)驅(qū)動(dòng)器中，包括：

將所述緩存中所述待下刷數(shù)據(jù)對(duì)應(yīng)的臟數(shù)據(jù)刷新至所述硬盤(pán)驅(qū)動(dòng)器；

將所述待下刷數(shù)據(jù)寫(xiě)入硬盤(pán)驅(qū)動(dòng)器中。

3.根據(jù)權(quán)利要求1所述數(shù)據(jù)寫(xiě)入方法，其特征在于，將所述待下刷數(shù)據(jù)寫(xiě)入緩存中，包括：

將所述待下刷數(shù)據(jù)寫(xiě)入緩存中；

當(dāng)滿足預(yù)設(shè)條件時(shí)，將所述緩存中的數(shù)據(jù)刷新至所述硬盤(pán)驅(qū)動(dòng)器中；其中，所述預(yù)設(shè)條件包括所述緩存的讀取命中率小于預(yù)設(shè)值或所述緩存已滿。

4.根據(jù)權(quán)利要求1所述數(shù)據(jù)寫(xiě)入方法，其特征在于，將所述待下刷數(shù)據(jù)寫(xiě)入緩存中，包括：

將所述待下刷數(shù)據(jù)同時(shí)寫(xiě)入所述緩存和所述硬盤(pán)驅(qū)動(dòng)器中。

5.根據(jù)權(quán)利要求1所述數(shù)據(jù)寫(xiě)入方法，其特征在于，當(dāng)觸發(fā)所述寫(xiě)緩沖區(qū)的數(shù)據(jù)下刷操作時(shí)，獲取待下刷數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊的歷史訪問(wèn)數(shù)據(jù)，包括：

當(dāng)所述寫(xiě)緩沖區(qū)的數(shù)據(jù)量達(dá)到閾值時(shí)，觸發(fā)所述寫(xiě)緩沖區(qū)的數(shù)據(jù)下刷操作，并獲取待下刷數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊的歷史訪問(wèn)數(shù)據(jù)。

6.根據(jù)權(quán)利要求1所述數(shù)據(jù)寫(xiě)入方法，其特征在于，還包括：

當(dāng)所述緩存觸發(fā)數(shù)據(jù)替換操作時(shí)，基于替換數(shù)據(jù)的歷史讀取數(shù)據(jù)對(duì)所述替換數(shù)據(jù)進(jìn)行標(biāo)記；

獲取所述替換數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊的特征信息作為第二特征信息，并利用標(biāo)記完成的替換數(shù)據(jù)和所述第二特征信息訓(xùn)練分類(lèi)器得到所述訓(xùn)練完成的分類(lèi)器。

7.根據(jù)權(quán)利要求6所述數(shù)據(jù)寫(xiě)入方法，其特征在于，所述獲取所述替換數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊的特征信息作為第二特征信息，包括：

確定所述替換數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)塊所屬的數(shù)據(jù)區(qū)域；其中，所述數(shù)據(jù)區(qū)域包括多個(gè)數(shù)據(jù)塊，所述數(shù)據(jù)區(qū)域的大小為訪問(wèn)粒度的整數(shù)倍；

提取所述數(shù)據(jù)區(qū)域的特征信息作為所述第二特征信息。

8.根據(jù)權(quán)利要求1所述數(shù)據(jù)寫(xiě)入方法，其特征在于，所述特征信息包括時(shí)間特征和/或請(qǐng)求類(lèi)特征；所述時(shí)間特征為描述訪問(wèn)數(shù)據(jù)塊的時(shí)間的特征，所述請(qǐng)求類(lèi)特征為描述訪問(wèn)數(shù)據(jù)塊的請(qǐng)求的特征。

9.根據(jù)權(quán)利要求8所述數(shù)據(jù)寫(xiě)入方法，其特征在于，所述時(shí)間特征包括上次訪問(wèn)時(shí)間戳和/或平均重用時(shí)間差；所述上次訪問(wèn)時(shí)間戳描述上一次訪問(wèn)數(shù)據(jù)塊的時(shí)間點(diǎn)，所述平均重用時(shí)間差描述訪問(wèn)數(shù)據(jù)塊的平均時(shí)間間隔；

所述請(qǐng)求類(lèi)特征包括平均請(qǐng)求大小、大請(qǐng)求比率、小請(qǐng)求比率和寫(xiě)請(qǐng)求比率中的任一項(xiàng)或任幾項(xiàng)的組合；所述大請(qǐng)求比率描述訪問(wèn)數(shù)據(jù)塊的請(qǐng)求中請(qǐng)求大小大于第一預(yù)設(shè)值的請(qǐng)求的比率，所述小請(qǐng)求比率描述訪問(wèn)數(shù)據(jù)塊的請(qǐng)求中請(qǐng)求大小小于第二預(yù)設(shè)值的請(qǐng)求的比率，所述寫(xiě)請(qǐng)求比率描述訪問(wèn)數(shù)據(jù)塊的請(qǐng)求中寫(xiě)請(qǐng)求的比率，所述第一預(yù)設(shè)值大于或等于所述第二預(yù)設(shè)值。

10.根據(jù)權(quán)利要求1至5中任一項(xiàng)所述數(shù)據(jù)寫(xiě)入方法，其特征在于，所述基于所述歷史訪問(wèn)數(shù)據(jù)判斷待下刷數(shù)據(jù)是否為只寫(xiě)數(shù)據(jù)，包括：

基于所述歷史訪問(wèn)數(shù)據(jù)利用統(tǒng)計(jì)學(xué)方法判斷待下刷數(shù)據(jù)是否為只寫(xiě)數(shù)據(jù)。