[發明專利]數據恢復方法、裝置、電子設備和介質有效
| 申請號: | 202010153076.3 | 申請日: | 2020-03-06 |
| 公開(公告)號: | CN111414277B | 公開(公告)日: | 2023-10-20 |
| 發明(設計)人: | 於圣楠;李宇彬;周彩冬;胡志鵬;劉柏;李仁杰;范長杰 | 申請(專利權)人: | 網易(杭州)網絡有限公司 |
| 主分類號: | G06F11/14 | 分類號: | G06F11/14 |
| 代理公司: | 北京超成律師事務所 11646 | 代理人: | 吳迪 |
| 地址: | 310052 浙江省杭州*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據 恢復 方法 裝置 電子設備 介質 | ||
1.一種數據恢復方法,其特征在于,作用于下游文件系統,該方法包括:
在接收到上游計算系統所發出關于目標壓縮文件的壓縮數據后,將壓縮數據保存在本地緩存中;
在發生故障而重啟后,獲取上游計算系統持久化在存儲系統中的關于目標壓縮文件的數據格式信息和有效傳輸長度;
根據數據格式信息和有效傳輸長度對目標壓縮文件進行恢復。
2.根據權利要求1所述的方法,其特征在于,根據數據格式信息和有效傳輸長度對目標壓縮文件進行恢復,包括:
根據有效數據長度和記錄的所述壓縮數據的到達順序對所述壓縮數據進行截斷處理,以生成有效壓縮數據;
根據數據格式信息生成目標壓縮文件的文件尾;
根據所述有效壓縮數據和所述文件尾對所述目標壓縮文件進行恢復。
3.根據權利要求1所述的方法,其特征在于,根據數據格式信息生成目標壓縮文件的文件尾,包括:
根據上游計算系統持久化在存儲系統中的關于目標壓縮文件的文件頭確定目標壓縮文件的文件類型;
根據所述文件類型確定文件尾拼接方式;
根據確定的文件尾拼接方式和數據格式信息生成目標壓縮文件的文件尾。
4.根據權利要求1所述的方法,其特征在于,若文件類型為PDF類型;則數據格式信息包括交叉引用表、根節點信息和文件解析節點信息;根據確定的文件尾拼接方式和數據格式信息生成目標壓縮文件的文件尾,包括:
將持久化在存儲系統中的交叉引用表、根節點信息和文件解析節點信息按照預定順序進行拼接,以形成所述目標壓縮文件的文件尾。
5.根據權利要求1所述的方法,其特征在于,若文件類型為Gzip類型;則數據格式信息包括校驗碼;根據確定的文件尾生成方式和數據格式信息生成目標壓縮文件的文件尾,包括:
對有效傳輸長度進行取模運算,以確定壓縮數據的標識符;
將所述校驗碼和所述標識符拼接成所述目標壓縮文件的文件尾。
6.根據權利要求1所述的方法,其特征在于,根據數據格式信息和有效傳輸長度對目標壓縮文件進行恢復,包括:
將保存在本地緩存中的壓縮數據進行分組,以得到多組子壓縮數據;
針對每組子壓縮數據,將該組子壓縮數據發送給對應的分布式計算節點,以使分布式計算節點根據接收到的有效傳輸長度對該組子壓縮數據進行截斷,以得到有效子壓縮數據,并根據數據格式信息生成該組子壓縮數據的子文件尾,以及將根據所述有效子壓縮數據和所述子文件尾恢復出子壓縮文件;
根據分布式計算節點所返回的子壓縮文件對所述目標壓縮文件進行恢復。
7.根據權利要求6所述的方法,其特征在于,針對每組子壓縮數據,將該組子壓縮數據發送給對應的分布式計算節點,包括:
獲取每個分布式計算節點的當前負載程度;
根據所述當前負載程度,確定每組子壓縮數據所對應的分布式計算節點;
針對每組子壓縮數據,將該組子壓縮數據發送給對應的分布式計算節點。
8.根據權利要求1所述的方法,其特征在于,還包括:
接收應用系統所發出的關于目標壓縮文件的數據讀取請求;
判斷是否發送過關于目標壓縮文件的確認指令的第一告知消息;所述確認指令是上游計算系統在將目標壓縮文件傳輸完成后發送給下游文件系統的;所述第一告知消息是下游文件系統在接收到確認指令后生成,并發送給上游計算系統的;
若發送過所述第一告知消息,則將目標壓縮文件發送給應用系統。
9.根據權利要求1所述的方法,其特征在于,還包括:
接收應用系統所發出的關于目標壓縮文件的數據讀取請求;
判斷是否發送過第二告知消息;所述第二告知消息是下游文件系統在將目標壓縮文件成功恢復后生成,并發送給上游計算系統的;
若發送過所述第二告知消息,則將目標壓縮文件發送給應用系統。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于網易(杭州)網絡有限公司,未經網易(杭州)網絡有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010153076.3/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





