[發(fā)明專利]一種文件信息摘要值計(jì)算方法及裝置

在審

• 申請?zhí)枺?/td>: 201611270139.3
• 申請日: 2016-12-30
• 公開（公告）號: CN106599320A
• 公開（公告）日: 2017-04-26
• 發(fā)明（設(shè)計(jì)）人: 王德群
• 申請（專利權(quán)）人: 鄭州云海信息技術(shù)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司11227
• 代理人: 羅滿

技術(shù)領(lǐng)域

本發(fā)明涉及云存儲技術(shù)領(lǐng)域，特別是涉及一種文件信息摘要值計(jì)算方法及裝置。

背景技術(shù)

隨著互聯(lián)網(wǎng)技術(shù)的不斷發(fā)展以及云計(jì)算的崛起，云服務(wù)越來越得到普及，在云服務(wù)應(yīng)用中，用戶可以將自己的文件上傳到云服務(wù)端進(jìn)行管理和保存。

但隨著使用用戶的不斷增加，用戶上傳的文件也不斷增多，云服務(wù)端存儲的數(shù)據(jù)量也隨之增長。但同時(shí)這些上傳文件中會存在大量的重復(fù)文件，即可能不同用戶會上傳相同的文件，導(dǎo)致存在冗余文件，這會給云服務(wù)端存儲帶來很大壓力，因此需要為云服務(wù)端數(shù)據(jù)進(jìn)行去重操作。可以利用文件數(shù)據(jù)的信息摘要值來檢查是否存在重復(fù)的文件，進(jìn)行去重操作，文件的信息摘要值具有唯一性。但是，當(dāng)文件容量較大時(shí)，計(jì)算信息摘要值的開銷和時(shí)間會很大，導(dǎo)致處理速度慢。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種文件信息摘要值計(jì)算方法及裝置，可加快對文件信息摘要值的計(jì)算。

為實(shí)現(xiàn)上述目的，本發(fā)明提供如下技術(shù)方案：

一種文件信息摘要值計(jì)算方法，包括：

將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件；

按照預(yù)設(shè)規(guī)則從所述多個(gè)片段文件中選取片段文件進(jìn)行讀取，計(jì)算所述文件的信息摘要值。

可選地，所述預(yù)設(shè)規(guī)則為每隔預(yù)設(shè)數(shù)量個(gè)所述片段文件，讀取一次片段文件。

可選地，所述預(yù)設(shè)規(guī)則為每隔1個(gè)所述片段文件，讀取一次片段文件。

可選地，還包括：檢測文件的容量大小；

所述將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件包括：

當(dāng)所述文件的容量大于閾值時(shí)，將所述文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件。

一種文件摘要值計(jì)算裝置，包括：

分片模塊，用于將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件；

計(jì)算模塊，用于按照預(yù)設(shè)規(guī)則從所述多個(gè)片段文件中選取片段文件進(jìn)行讀取，計(jì)算所述文件的信息摘要值。

可選地，所述預(yù)設(shè)規(guī)則為每隔預(yù)設(shè)數(shù)量個(gè)所述片段文件，讀取一次片段文件。

可選地，所述預(yù)設(shè)規(guī)則為每隔1個(gè)所述片段文件，讀取一次片段文件。

可選地，還包括檢測模塊，用于檢測文件的容量大小；

所述分片模塊用于將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件包括：

所述分片模塊具體用于當(dāng)所述文件的容量大于閾值時(shí)，將所述文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件。

由上述技術(shù)方案可知，本發(fā)明所提供的文件信息摘要值計(jì)算方法及裝置，將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件，按照預(yù)設(shè)規(guī)則選取片段文件進(jìn)行讀取，計(jì)算所述文件的信息摘要值，以根據(jù)文件的信息摘要值檢查是否存在重復(fù)文件。

本發(fā)明文件信息摘要值計(jì)算方法及裝置，將文件分成多個(gè)片段，從中選取片段文件進(jìn)行讀取來計(jì)算文件的信息摘要值，與以整個(gè)文件來計(jì)算文件的信息摘要值方法相比，本方法計(jì)算信息摘要值更快，計(jì)算時(shí)間和計(jì)算開銷少，實(shí)現(xiàn)了加快文件信息摘要值的計(jì)算。

附圖說明

為了更清楚地說明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。

圖1為本發(fā)明實(shí)施例提供的一種文件信息摘要值計(jì)算方法的流程圖；

圖2為本發(fā)明實(shí)施例提供的一種文件信息摘要值計(jì)算裝置的示意圖。

具體實(shí)施方式

為了使本技術(shù)領(lǐng)域的人員更好地理解本發(fā)明中的技術(shù)方案，下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例。基于本發(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動前提下所獲得的所有其他實(shí)施例，都應(yīng)當(dāng)屬于本發(fā)明保護(hù)的范圍。

請參考圖1，本發(fā)明實(shí)施例提供的一種文件信息摘要值計(jì)算方法，包括步驟：

S10：將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件；

S11：按照預(yù)設(shè)規(guī)則從所述多個(gè)片段文件中選取片段文件進(jìn)行讀取，計(jì)算所述文件的信息摘要值。

可以看出，本實(shí)施例文件信息摘要值計(jì)算方法，將文件分成容量大小為預(yù)設(shè)值的多個(gè)片段文件，按照預(yù)設(shè)規(guī)則選取片段文件進(jìn)行讀取，計(jì)算所述文件的信息摘要值，以根據(jù)文件的信息摘要值檢查是否存在重復(fù)文件。