[發(fā)明專(zhuān)利]一種數(shù)據(jù)存儲(chǔ)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110784013.2
• 申請(qǐng)日: 2021-07-12
• 公開(kāi)（公告）號(hào): CN113377781A
• 公開(kāi)（公告）日: 2021-09-10
• 發(fā)明（設(shè)計(jì)）人: 王嘉輝;鄭彩平;張嬌昱;王煒煌
• 申請(qǐng)（專(zhuān)利權(quán)）人: 中國(guó)工商銀行股份有限公司
• 主分類(lèi)號(hào): G06F16/22
• 分類(lèi)號(hào): G06F16/22;G06F16/21;G06F16/2455
• 代理公司: 北京三友知識(shí)產(chǎn)權(quán)代理有限公司 11127
• 代理人: 任默聞;王濤

本文提供了一種數(shù)據(jù)存儲(chǔ)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)，涉及大數(shù)據(jù)技術(shù)領(lǐng)域，可用于金融領(lǐng)域，方法包括：判定待存儲(chǔ)數(shù)據(jù)的熱度屬性，熱度屬性為熱數(shù)據(jù)、溫?cái)?shù)據(jù)或冷數(shù)據(jù)中的一種；若待存儲(chǔ)數(shù)據(jù)的熱度屬性為熱數(shù)據(jù)，則判斷熱數(shù)據(jù)存儲(chǔ)單元的占用率是否小于第一閾值；若熱數(shù)據(jù)存儲(chǔ)單元的占用率大于或等于第一閾值，則將待存儲(chǔ)數(shù)據(jù)存儲(chǔ)于第一緩沖區(qū)；若熱數(shù)據(jù)存儲(chǔ)單元的占用率小于第一閾值，則將待存儲(chǔ)數(shù)據(jù)存儲(chǔ)于熱數(shù)據(jù)存儲(chǔ)單元。本文通過(guò)設(shè)置第一緩沖區(qū)的方式避免熱數(shù)據(jù)存儲(chǔ)單元達(dá)到其存儲(chǔ)容量的極限造成崩壞，提高了數(shù)據(jù)存儲(chǔ)安全性和可靠性；也避免了由于熱數(shù)據(jù)存儲(chǔ)單元的占用率較高、熱數(shù)據(jù)存儲(chǔ)需求得不到滿(mǎn)足造成的數(shù)據(jù)存儲(chǔ)污染問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及大數(shù)據(jù)技術(shù)領(lǐng)域，可用于金融領(lǐng)域，尤其是一種數(shù)據(jù)存儲(chǔ)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)。

背景技術(shù)

在數(shù)據(jù)量爆炸增長(zhǎng)的大數(shù)據(jù)時(shí)代，數(shù)據(jù)存儲(chǔ)面臨著巨大挑戰(zhàn)。現(xiàn)有技術(shù)中，常根據(jù)數(shù)據(jù)的訪問(wèn)頻率將數(shù)據(jù)分為熱數(shù)據(jù)(即經(jīng)常訪問(wèn)的數(shù)據(jù))和冷數(shù)據(jù)(不常訪問(wèn)的數(shù)據(jù))，再將熱數(shù)據(jù)、和冷數(shù)據(jù)存儲(chǔ)于分級(jí)存儲(chǔ)結(jié)構(gòu)中，以避免冷數(shù)據(jù)駐留于高性能存儲(chǔ)層級(jí)中造成的存儲(chǔ)資源浪費(fèi)和存儲(chǔ)污染。

但各行業(yè)領(lǐng)域數(shù)據(jù)存儲(chǔ)場(chǎng)景不同，冷、熱數(shù)據(jù)的占比不盡相同，而現(xiàn)有的分級(jí)存儲(chǔ)結(jié)構(gòu)其中熱數(shù)據(jù)和冷數(shù)據(jù)的存儲(chǔ)容量配比一般是固定的。固定配比的分級(jí)存儲(chǔ)結(jié)構(gòu)對(duì)于不同行業(yè)不同領(lǐng)域，適配性可能較差，若分級(jí)存儲(chǔ)結(jié)構(gòu)的冷、熱數(shù)據(jù)容量之比與該行業(yè)領(lǐng)域的冷、熱數(shù)據(jù)的比例有較大差異時(shí)，則會(huì)造成存儲(chǔ)空間的浪費(fèi)。

針對(duì)現(xiàn)有技術(shù)存在的上述缺陷，本文旨在提供一種數(shù)據(jù)存儲(chǔ)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)，對(duì)各類(lèi)數(shù)據(jù)起到動(dòng)態(tài)的分級(jí)存儲(chǔ)的作用，提高數(shù)據(jù)存儲(chǔ)的靈活性。

發(fā)明內(nèi)容

針對(duì)現(xiàn)有技術(shù)的上述問(wèn)題，本文的目的在于，提供一種數(shù)據(jù)存儲(chǔ)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)，以解決現(xiàn)有技術(shù)中固定存儲(chǔ)容量的分級(jí)存儲(chǔ)結(jié)構(gòu)不能適用于各行各業(yè)的數(shù)據(jù)存儲(chǔ)場(chǎng)景造成的存儲(chǔ)空間浪費(fèi)的問(wèn)題。

為了解決上述技術(shù)問(wèn)題，本文的具體技術(shù)方案如下：

一方面，本文提供一種數(shù)據(jù)存儲(chǔ)方法，包括：

判定待存儲(chǔ)數(shù)據(jù)的熱度屬性，所述熱度屬性為熱數(shù)據(jù)、溫?cái)?shù)據(jù)或冷數(shù)據(jù)中的一種；

若所述待存儲(chǔ)數(shù)據(jù)的熱度屬性為熱數(shù)據(jù)，則判斷熱數(shù)據(jù)存儲(chǔ)單元的占用率是否小于第一閾值；

若所述熱數(shù)據(jù)存儲(chǔ)單元的占用率大于或等于第一閾值，則將所述待存儲(chǔ)數(shù)據(jù)存儲(chǔ)于第一緩沖區(qū)；

若所述熱數(shù)據(jù)存儲(chǔ)單元的占用率小于第一閾值，則將所述待存儲(chǔ)數(shù)據(jù)存儲(chǔ)于所述熱數(shù)據(jù)存儲(chǔ)單元。

具體地，所述將所述待存儲(chǔ)數(shù)據(jù)存儲(chǔ)于第一緩沖區(qū)之后，所述方法還包括：

判斷所述第一緩沖區(qū)的占用率是否小于第一門(mén)限值；

若所述第一緩沖區(qū)的占用率大于或等于第一門(mén)限值，擴(kuò)充所述熱數(shù)據(jù)存儲(chǔ)單元。

進(jìn)一步地，所述判定待存儲(chǔ)數(shù)據(jù)的熱度屬性，包括：

獲取所述待存儲(chǔ)數(shù)據(jù)的訪問(wèn)頻率和來(lái)源信息，所述來(lái)源信息包括所屬行業(yè)信息、所屬系統(tǒng)信息和所屬應(yīng)用信息；

根據(jù)所述訪問(wèn)頻率和所述來(lái)源信息，判定所述待存儲(chǔ)數(shù)據(jù)的熱度屬性。

具體地，所述方法還包括：

獲取所述熱數(shù)據(jù)存儲(chǔ)單元內(nèi)的第一已存儲(chǔ)數(shù)據(jù)；

根據(jù)所述第一已存儲(chǔ)數(shù)據(jù)的訪問(wèn)頻率和來(lái)源信息，判斷所述第一已存儲(chǔ)數(shù)據(jù)的熱度屬性是否仍為熱數(shù)據(jù)；

若所述第一已存儲(chǔ)數(shù)據(jù)熱度屬性為溫?cái)?shù)據(jù)或冷數(shù)據(jù)，則將所述第一已存儲(chǔ)數(shù)據(jù)遷移至溫?cái)?shù)據(jù)存儲(chǔ)單元或冷數(shù)據(jù)存儲(chǔ)單元。