[發(fā)明專利]一種數(shù)據(jù)處理方法、裝置和管理節(jié)點(diǎn)

有效

• 申請(qǐng)?zhí)枺?/td>: 201811210214.6
• 申請(qǐng)日: 2018-10-17
• 公開（公告）號(hào): CN111061423B
• 公開（公告）日: 2023-09-26
• 發(fā)明（設(shè)計(jì)）人: 薛成剛;許愛秋
• 申請(qǐng)（專利權(quán)）人: 杭州海康威視系統(tǒng)技術(shù)有限公司
• 主分類號(hào): G06F3/06
• 分類號(hào): G06F3/06
• 代理公司: 北京博思佳知識(shí)產(chǎn)權(quán)代理有限公司 11415
• 代理人: 林祥

本申請(qǐng)?zhí)峁┮环N數(shù)據(jù)處理方法、裝置和管理節(jié)點(diǎn)。本申請(qǐng)?zhí)峁┑臄?shù)據(jù)處理方法，包括：接收各個(gè)存儲(chǔ)節(jié)點(diǎn)上報(bào)的資源池信息，所述資源池信息至少包括：目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)和目標(biāo)錄制時(shí)間點(diǎn)，在確定數(shù)據(jù)覆蓋條件達(dá)到時(shí)，針對(duì)每一存儲(chǔ)節(jié)點(diǎn)，依據(jù)該存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)和所有存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)錄制時(shí)間點(diǎn)判斷該存儲(chǔ)節(jié)點(diǎn)在之前是否正常執(zhí)行覆蓋任務(wù)；如果否，依據(jù)該存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)，為該存儲(chǔ)節(jié)點(diǎn)確定待執(zhí)行覆蓋任務(wù)的第一數(shù)據(jù)覆蓋時(shí)間點(diǎn)，并將所述第一數(shù)據(jù)覆蓋時(shí)間點(diǎn)攜帶在覆蓋任務(wù)中下發(fā)給該存儲(chǔ)節(jié)點(diǎn)。本申請(qǐng)?zhí)峁┑臄?shù)據(jù)處理方法、裝置和管理節(jié)點(diǎn)，可在故障的存儲(chǔ)節(jié)點(diǎn)恢復(fù)正常后，平滑的刪除該存儲(chǔ)節(jié)點(diǎn)存儲(chǔ)的視頻數(shù)據(jù)。

技術(shù)領(lǐng)域

本申請(qǐng)涉及云存儲(chǔ)技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)處理方法、裝置和管理節(jié)點(diǎn)。

背景技術(shù)

近年來(lái)，隨著云存儲(chǔ)技術(shù)的發(fā)展，云存儲(chǔ)系統(tǒng)均支持循環(huán)覆蓋，以刪除云存儲(chǔ)系統(tǒng)中的歷史數(shù)據(jù)，保證存儲(chǔ)空間的重復(fù)利用。

相關(guān)技術(shù)提出了一種數(shù)據(jù)處理方法，在該方法中，管理節(jié)點(diǎn)以最近一次下發(fā)覆蓋任務(wù)時(shí)該覆蓋任務(wù)攜帶的數(shù)據(jù)覆蓋時(shí)間點(diǎn)和指定時(shí)間點(diǎn)中時(shí)間較晚的時(shí)間點(diǎn)為基準(zhǔn)時(shí)間點(diǎn)確定待執(zhí)行覆蓋任務(wù)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)，并向各個(gè)存儲(chǔ)節(jié)點(diǎn)下發(fā)攜帶該目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)的覆蓋任務(wù)，以指示存儲(chǔ)節(jié)點(diǎn)將錄制時(shí)間點(diǎn)處于該目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)之前的視頻數(shù)據(jù)刪除。其中，指定時(shí)間點(diǎn)為各個(gè)存儲(chǔ)節(jié)點(diǎn)上報(bào)的最早的視頻數(shù)據(jù)的錄制時(shí)間點(diǎn)中時(shí)間最早的錄制時(shí)間點(diǎn)。

然而，由于各種原因，存儲(chǔ)節(jié)點(diǎn)會(huì)故障。這樣，當(dāng)故障的存儲(chǔ)節(jié)點(diǎn)恢復(fù)正常后，由于該存儲(chǔ)節(jié)點(diǎn)因故障長(zhǎng)時(shí)間未執(zhí)行覆蓋任務(wù)，該存儲(chǔ)節(jié)點(diǎn)對(duì)應(yīng)的最早的視頻數(shù)據(jù)的錄制時(shí)間點(diǎn)遠(yuǎn)遠(yuǎn)早于依據(jù)上述方法確定出的覆蓋時(shí)間點(diǎn)。這樣，該存儲(chǔ)節(jié)點(diǎn)執(zhí)行本次覆蓋任務(wù)后，將導(dǎo)致該存儲(chǔ)節(jié)點(diǎn)上的視頻數(shù)據(jù)被一次性大量刪除。這樣，將導(dǎo)致用戶沒(méi)有足夠的時(shí)間利用該存儲(chǔ)節(jié)點(diǎn)上的視頻數(shù)據(jù)，造成數(shù)據(jù)資源的浪費(fèi)。

發(fā)明內(nèi)容

有鑒于此，本申請(qǐng)?zhí)峁┮环N數(shù)據(jù)處理方法、裝置和管理節(jié)點(diǎn)，以在故障的存儲(chǔ)節(jié)點(diǎn)恢復(fù)正常后，平滑的刪除該存儲(chǔ)節(jié)點(diǎn)存儲(chǔ)的視頻數(shù)據(jù)，以給用戶預(yù)留足夠的時(shí)間利用該存儲(chǔ)節(jié)點(diǎn)存儲(chǔ)的視頻數(shù)據(jù)。

本申請(qǐng)第一方面提供一種數(shù)據(jù)處理方法，所述方法應(yīng)用于云存儲(chǔ)系統(tǒng)中的管理節(jié)點(diǎn)，所述方法包括：

接收各個(gè)存儲(chǔ)節(jié)點(diǎn)上報(bào)的資源池信息，所述資源池信息至少包括：目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)和目標(biāo)錄制時(shí)間點(diǎn)，所述目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)為最近的數(shù)據(jù)覆蓋時(shí)間點(diǎn)，所述目標(biāo)錄制時(shí)間點(diǎn)為最早的視頻數(shù)據(jù)錄制時(shí)間點(diǎn)；

在確定數(shù)據(jù)覆蓋條件達(dá)到時(shí)，針對(duì)每一存儲(chǔ)節(jié)點(diǎn)，依據(jù)該存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)和所有存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)錄制時(shí)間點(diǎn)判斷該存儲(chǔ)節(jié)點(diǎn)在之前是否正常執(zhí)行覆蓋任務(wù)；

若否，依據(jù)該存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)，為該存儲(chǔ)節(jié)點(diǎn)確定待執(zhí)行覆蓋任務(wù)的第一數(shù)據(jù)覆蓋時(shí)間點(diǎn)，并將所述第一數(shù)據(jù)覆蓋時(shí)間點(diǎn)攜帶在覆蓋任務(wù)中下發(fā)給該存儲(chǔ)節(jié)點(diǎn)。

本申請(qǐng)第二方面提供一種數(shù)據(jù)處理裝置，所述裝置應(yīng)用于云存儲(chǔ)系統(tǒng)中的管理節(jié)點(diǎn)，所述裝置包括接收模塊、判斷模塊和處理模塊，其中，

所述接收模塊，用于接收各個(gè)存儲(chǔ)節(jié)點(diǎn)上報(bào)的資源池信息，所述資源池信息至少包括：目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)和目標(biāo)錄制時(shí)間點(diǎn)，所述目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)為最近的數(shù)據(jù)覆蓋時(shí)間點(diǎn)，所述目標(biāo)錄制時(shí)間點(diǎn)為最早的視頻數(shù)據(jù)錄制時(shí)間點(diǎn)；

所述判斷模塊，用于在確定數(shù)據(jù)覆蓋條件達(dá)到時(shí)，針對(duì)每一存儲(chǔ)節(jié)點(diǎn)，依據(jù)該存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)和所有存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)錄制時(shí)間點(diǎn)判斷該存儲(chǔ)節(jié)點(diǎn)在之前是否正常執(zhí)行覆蓋任務(wù)；

所述處理模塊，用于在所述判斷模塊判斷該存儲(chǔ)節(jié)點(diǎn)在之前未正常執(zhí)行覆蓋任務(wù)時(shí)，依據(jù)該存儲(chǔ)節(jié)點(diǎn)上報(bào)的目標(biāo)數(shù)據(jù)覆蓋時(shí)間點(diǎn)，為該存儲(chǔ)節(jié)點(diǎn)確定待執(zhí)行覆蓋任務(wù)的第一數(shù)據(jù)覆蓋時(shí)間點(diǎn)，并將所述第一數(shù)據(jù)覆蓋時(shí)間點(diǎn)攜帶在覆蓋任務(wù)中下發(fā)給該存儲(chǔ)節(jié)點(diǎn)。