[發明專利]數據刪除方法及裝置

有效

• 申請號: 201710091431.7
• 申請日: 2017-02-17
• 公開（公告）號: CN106990914B
• 公開（公告）日: 2020-06-12
• 發明（設計）人: 李發明;張勤
• 申請（專利權）人: 北京同有飛驥科技股份有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種數據刪除方法，其特征在于，包括步驟：

接收待存儲數據，將所述待存儲數據切成預設大小的切片數據塊；

將每個切片數據塊以對象的方式存儲，將每個切片數據的對象和指紋索引組成數據結構存儲；

獲取待處理數據；

確定待處理數據中相互匹配的對象；

比對相互匹配的對象對應的數據，確定相互匹配的對象間重復的數據；

將所確定的重復的數據刪除；

其中，確定待處理數據中相互匹配的對象的步驟包括：

確定所述待存儲數據中每個切片數據塊對應的對象；

將所確定的對象加入指紋索引隊列，進行對象指紋比對，通過Hash算法確定相互匹配的對象。

2.如權利要求1所述的數據刪除方法，其特征在于，所述獲取待處理數據的步驟包括：

確定數據刪除的模式；

在數據刪除的模式為實時刪除模式時，獲取當前存入的數據以及歷史存入的數據，將當前存入的數據以及歷史存入的數據作為待處理數據；

在數據刪除的模式為定時刪除模式時，獲取當前已存儲的數據，將當前已存儲的數據作為待處理數據。

3.如權利要求1所述的數據刪除方法，其特征在于，所述比對相互匹配的對象對應的數據，確定相互匹配的對象間重復的數據的步驟包括：

比對相互匹配的對象對應的數據，通過MD5算法計算數據的正確性得到有效數據；

從有效數據中確定相互匹配的對象間重復的數據。

4.一種數據刪除裝置，其特征在于，包括：

處理模塊，用于接收待存儲數據，將所述待存儲數據切片，切成預設大小的切片數據塊；

存儲模塊，用于將每個切片數據塊以對象的方式存儲，將每個切片數據的對象和指紋索引組成數據結構存儲；

獲取模塊，用于獲取待處理數據；

確定模塊，用于提取待處理數據中相互匹配的對象；

比對模塊，用于比對相互匹配的對象對應的數據，確定相互匹配的對象間重復的數據；

刪除模塊，用于將所確定的重復的數據刪除；

其中，所述確定模塊，還用于確定所述待存儲數據中包含的對象；確定模塊還用于

將所確定的對象加入指紋索引隊列，進行對象指紋比對，通過Hash算法確定相互匹配的對象。

5.如權利要求4所述的數據刪除裝置，其特征在于，所述獲取模塊包括確定單元，用于確定數據刪除的模式；

獲取單元，用于在數據刪除的模式為實時刪除模式時，獲取當前存入的數據以及歷史存入的數據，將當前存入的數據以及歷史存入的數據作為待處理數據；獲取單元還用于

在數據刪除的模式為定時刪除模式時，獲取當前已存儲的數據，將當前已存儲的數據作為待處理數據。

6.如權利要求5所述的數據刪除裝置，其特征在于，所述比對模塊，還用于比對相互匹配的對象對應的數據，通過MD5算法計算數據的正確性得到有效數據；比對模塊還用于

從有效數據中確定相互匹配的對象間重復的數據。