[發明專利]一種數據備份方法及云HDFS系統有效
| 申請號: | 201610268816.1 | 申請日: | 2016-04-27 |
| 公開(公告)號: | CN107315652B | 公開(公告)日: | 2021-04-16 |
| 發明(設計)人: | 魯瑞;侯建衛;付長東 | 申請(專利權)人: | 中國移動通信集團山西有限公司;北京天和科瑞信息技術有限公司 |
| 主分類號: | G06F11/14 | 分類號: | G06F11/14 |
| 代理公司: | 北京派特恩知識產權代理有限公司 11270 | 代理人: | 江宇;張穎玲 |
| 地址: | 030032 山西*** | 國省代碼: | 山西;14 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據 備份 方法 hdfs 系統 | ||
1.一種數據備份方法,其特征在于,所述方法包括:
在當前備份周期內,通過預定接口從數據的源存儲平臺獲取至少一種待備份數據,所述源存儲平臺為關系數據庫管理系統RDBMS系統平臺、大規模并行處理機制MPP系統平臺和基于云架構的分布式文件系統HDFS系統平臺中的至少一個;
獲取所述至少一種待備份數據中每種待備份數據的第一信息、存儲時間信息和遷移度信息,將每種待備份數據的遷移度信息與存儲時間信息進行相除運算,得到第一運算結果;將每種待備份數據的第一信息與對應的第一運算結果進行相乘運算,得到每種待備份數據的屬性信息;
其中,所述第一信息表征為在歷史周期內的待備份數據被用戶操作的頻繁程度,所述存儲時間信息表征為待備份數據在所述至少一源存儲平臺中的存放時間,所述遷移度信息表征為待備份數據在所有源存儲平臺的至少兩個源存儲平臺中的遷移次數;
依據所述屬性信息,對所述至少一種待備份數據進行備份。
2.根據權利要求1所述的方法,其特征在于,所述通過預定接口從數據的源存儲平臺獲取至少一種待備份數據,包括:
通過預定接口讀取存儲在所述源存儲平臺中的數據,得到所述至少一種待備份數據。
3.根據權利要求1所述的方法,其特征在于,所述依據所述屬性信息,對所述至少一種待備份數據進行備份,包括:
將所有待備份數據的屬性信息進行大小關系的比較,得到第一排序,所述第一排序是按照屬性信息的從大到小的順序進行排列的;
按照第一排序中的屬性信息的大小關系,對所述至少一種待備份數據進行備份,其中所述屬性信息表征為待備份數據的使用價值。
4.一種云HDFS系統,其特征在于,所述系統包括:
第一獲取單元,用于在當前備份周期內,通過預定接口從數據的源存儲平臺獲取至少一種待備份數據,所述源存儲平臺為關系數據庫管理系統RDBMS系統平臺、大規模并行處理機制MPP系統平臺和基于云架構的分布式文件系統HDFS系統平臺中的至少一個;第一計算單元,用于獲取所述至少一種待備份數據中每種待備份數據的第一信息、存儲時間信息和遷移度信息,依據每種待備份數據的第一信息、存儲時間信息及遷移度信息,計算當前備份周期內的每種待備份數據的屬性信息;其中,所述第一信息表征為在歷史周期內的待備份數據被用戶操作的頻繁程度,所述存儲時間信息表征為待備份數據在所述至少一源存儲平臺中的存放時間,所述遷移度信息表征為待備份數據在所有源存儲平臺的至少兩個源存儲平臺中的遷移次數;
所述第一計算單元,還用于:
將每種待備份數據的遷移度信息與存儲時間信息進行相除運算,得到第一運算結果;
將每種待備份數據的第一信息與對應的第一運算結果進行相乘運算,得到每種待備份數據的屬性信息;
第一備份單元,用于依據所述屬性信息,對所述至少一種待備份數據進行備份。
5.根據權利要求4所述的系統,其特征在于,所述第一獲取單元,還用于:
通過預定接口讀取存儲在所述源存儲平臺中的數據,得到所述至少一種待備份數據。
6.根據權利要求4所述的系統,其特征在于,所述第一備份單元,還用于:
將所有待備份數據的屬性信息進行大小關系的比較,得到第一排序,所述第一排序是按照屬性信息的從大到小的順序進行排列的;
按照第一排序中的屬性信息的大小關系,對所述至少一種待備份數據進行備份,其中所述屬性信息表征為待備份數據的使用價值。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于中國移動通信集團山西有限公司;北京天和科瑞信息技術有限公司,未經中國移動通信集團山西有限公司;北京天和科瑞信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201610268816.1/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種基于虛擬化備份的技術
- 下一篇:一種實時統計的排行榜數據恢復方法與裝置
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





