[發(fā)明專利]一種控制DDP模塊開(kāi)關(guān)的方法及其相關(guān)裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201810543668.9
• 申請(qǐng)日: 2018-05-30
• 公開(kāi)（公告）號(hào): CN108762680A
• 公開(kāi)（公告）日: 2018-11-06
• 發(fā)明（設(shè)計(jì)）人: 何孝金
• 申請(qǐng)（專利權(quán)）人: 鄭州云海信息技術(shù)有限公司
• 主分類號(hào): G06F3/06
• 分類號(hào): G06F3/06
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 王寶筠

本申請(qǐng)實(shí)施例公開(kāi)了一種控制DDP模塊開(kāi)關(guān)的方法及其相關(guān)裝置，用于智能控制DDP模塊的開(kāi)啟或關(guān)閉，減少人為干預(yù)，使得DDP模塊的開(kāi)關(guān)判斷更為準(zhǔn)確。本申請(qǐng)實(shí)施例方法包括：獲取第一數(shù)據(jù)流；通過(guò)特征識(shí)別模塊識(shí)別所述第一數(shù)據(jù)流，得到第一特征；判斷預(yù)置的特征庫(kù)中是否存有所述第一特征；若存有所述第一特征，則從所述特征庫(kù)中獲取所述第一特征對(duì)應(yīng)的重復(fù)數(shù)據(jù)刪除DDP率；若所述DDP率大于第一閾值，則開(kāi)啟所述DDP模塊；若所述DDP率不大于所述第一閾值，則關(guān)閉所述DDP模塊。

技術(shù)領(lǐng)域

本申請(qǐng)涉及存儲(chǔ)領(lǐng)域，尤其涉及一種控制DDP模塊開(kāi)關(guān)的方法及其相關(guān)裝置。

背景技術(shù)

現(xiàn)今，計(jì)算機(jī)越來(lái)越普及，計(jì)算機(jī)用戶一般都會(huì)存儲(chǔ)很多數(shù)據(jù)，且用戶計(jì)算機(jī)內(nèi)一般總會(huì)有一些重復(fù)的數(shù)據(jù)，這些重復(fù)的數(shù)據(jù)存在于存儲(chǔ)空間中相當(dāng)浪費(fèi)數(shù)據(jù)存儲(chǔ)空間。

重復(fù)數(shù)據(jù)刪除(deduplication，DDP)是一種可減少數(shù)據(jù)存儲(chǔ)空間的核心技術(shù)，尤其是在存儲(chǔ)空間成本較高的全閃存存儲(chǔ)陣列(aLL flash array，AFA)，DDP已經(jīng)成為必備的特性。DDP一般算法為：將新寫(xiě)入的數(shù)據(jù)計(jì)算一個(gè)指紋，然后與已存儲(chǔ)的指紋對(duì)比，如果發(fā)現(xiàn)有相同指紋，則記錄相同數(shù)據(jù)的位置，當(dāng)前數(shù)據(jù)不寫(xiě)盤(pán)。然而做DDP對(duì)系統(tǒng)計(jì)算資源占用較大，對(duì)主機(jī)請(qǐng)求的寫(xiě)時(shí)延有一定影響(通常在10％左右)。對(duì)不同的主機(jī)業(yè)務(wù)來(lái)說(shuō)，DDP帶來(lái)的價(jià)值是不一樣的，對(duì)于DDP率很高的應(yīng)用，比如虛擬機(jī)場(chǎng)景(DDP率通常高于6:1)，少量的性能影響帶來(lái)了巨大的空間節(jié)省是非常值得的；但是對(duì)于DDP率很低的場(chǎng)景，比如視頻監(jiān)控(DDP率通常小于2:1)，開(kāi)啟DDP節(jié)省的空間不大，反而影響業(yè)務(wù)的性能，此時(shí)用戶通常希望關(guān)閉重刪功能。

然而現(xiàn)有的DDP開(kāi)關(guān)都是需要人工干預(yù)的，也即需要人為明確識(shí)別后續(xù)的應(yīng)用場(chǎng)景可能的重刪率，再人為設(shè)置DDP開(kāi)關(guān)開(kāi)啟或關(guān)閉。這種方式有2個(gè)很大的問(wèn)題：

1、靠人為設(shè)置的開(kāi)關(guān)，往往太固定，完全依賴人的操作，如果人為設(shè)置錯(cuò)誤或者應(yīng)用場(chǎng)景變更而人為忘記變更設(shè)置，那么最終是否做DDP的設(shè)置就可能是錯(cuò)誤的。

2、某些應(yīng)用會(huì)將當(dāng)前存儲(chǔ)空間提供給第三方應(yīng)用，至于第三方應(yīng)用具體的業(yè)務(wù)，存儲(chǔ)設(shè)備無(wú)從知曉，維護(hù)人員根本就判斷不了是否應(yīng)該開(kāi)啟DDP。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種控制DDP模塊開(kāi)關(guān)的方法及其相關(guān)裝置，用于智能控制DDP模塊的開(kāi)啟或關(guān)閉，減少人為干預(yù)，使得DDP模塊的開(kāi)關(guān)判斷更為準(zhǔn)確。

本申請(qǐng)實(shí)施例的第一方面提供了一種控制DDP模塊開(kāi)關(guān)的方法，具體包括：獲取第一數(shù)據(jù)流；通過(guò)特征識(shí)別模塊識(shí)別所述第一數(shù)據(jù)流，得到第一特征；判斷預(yù)置的特征庫(kù)中是否存有所述第一特征；若存有所述第一特征，則從所述特征庫(kù)中獲取所述第一特征對(duì)應(yīng)的重復(fù)數(shù)據(jù)刪除DDP率；若所述DDP率大于第一閾值，則開(kāi)啟所述DDP模塊；若所述DDP率不大于所述第一閾值，則關(guān)閉所述DDP模塊。

在一種可能的設(shè)計(jì)中，在本申請(qǐng)實(shí)施例第一方面的第一種實(shí)現(xiàn)方式中，所述判斷預(yù)置的特征庫(kù)中是否存有所述第一特征之后，所述方法還包括：若不存有所述第一特征，則開(kāi)啟所述DDP模塊。

在一種可能的設(shè)計(jì)中，在本申請(qǐng)實(shí)施例第一方面的第二種實(shí)現(xiàn)方式中，所述若不存有所述第一特征，則開(kāi)啟所述DDP模塊之后，所述方法還包括：通過(guò)DDP率統(tǒng)計(jì)模塊獲取所述DDP率；將所述第一特征、所述DDP率以及所述第一特征和所述DDP率的對(duì)應(yīng)關(guān)系存儲(chǔ)至所述特征庫(kù)中。

在一種可能的設(shè)計(jì)中，在本申請(qǐng)實(shí)施例第一方面的第三種實(shí)現(xiàn)方式中，所述獲取第一數(shù)據(jù)流之前，所述方法還包括：構(gòu)建所述特征庫(kù)。

在一種可能的設(shè)計(jì)中，在本申請(qǐng)實(shí)施例第一方面的第四種實(shí)現(xiàn)方式中，所述構(gòu)建所述特征庫(kù)包括：獲取數(shù)據(jù)樣本，所述數(shù)據(jù)樣本為已知樣本DDP率的數(shù)據(jù)；通過(guò)所述特征識(shí)別模塊識(shí)別所述數(shù)據(jù)樣本，得到樣本特征；根據(jù)所述樣本特征以及所述樣本DDP率構(gòu)建所述特征庫(kù)。