[發明專利]HBase數據備份恢復的方法和裝置在審
| 申請號: | 201410483014.3 | 申請日: | 2014-09-19 |
| 公開(公告)號: | CN104199963A | 公開(公告)日: | 2014-12-10 |
| 發明(設計)人: | 劉璧怡;郭美思;吳楠 | 申請(專利權)人: | 浪潮(北京)電子信息產業有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30;G06F11/14 |
| 代理公司: | 北京安信方達知識產權代理有限公司 11262 | 代理人: | 王丹;李丹 |
| 地址: | 100085 北京市海*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | hbase 數據 備份 恢復 方法 裝置 | ||
1.一種HBase數據備份恢復的方法,其特征在于,包括:
在HBase數據進行備份時,將HBase內存中的數據刷到HFile文件中;為HBase表結構下的每個Region中的每個HFile文件創建相應的引用文件,對每個HBase表的HFile文件進行備份;
在HBase數據進行恢復時,若所需要恢復的數據是持久化數據,根據所需要恢復的數據對應的引用文件,進行持久化數據恢復;若所需要恢復的數據是內存數據,根據日志文件,對HBase內存數據進行恢復。
2.根據權利要求1所述的HBase數據備份恢復的方法,其特征在于,所述若所需要恢復的數據是持久化數據,根據所需要恢復的數據對應的引用文件,進行持久化數據恢復,包括:
若所需要恢復的數據是持久化數據,將所需要恢復的數據對應的引用文件放入HBase表中對應Region文件夾下,進行持久化數據恢復。
3.根據權利要求1或2所述的HBase數據備份恢復的方法,其特征在于,所述進行持久化數據恢復是在HBase的Region進行合并時整理成完整的數據,合并操作是將多個HFile文件合并成大文件,在達到HBase合并配置參數值時自動觸發。
4.根據權利要求1所述的HBase數據備份恢復的方法,其特征在于,所述日志文件包括執行操作的HBase表、執行操作的HBase表對應的Region和進行的相應執行操作。
5.根據權利要求4所述的HBase數據備份恢復的方法,其特征在于,所述若所需要恢復的數據是內存數據,根據日志文件,對HBase內存數據進行恢復,包括:
若所需要恢復的數據是內存數據,根據日志文件中對應的HBase表名稱和Region名稱,將日志文件恢復到相應的Region文件夾下;當引用文件及日志放置到Region文件夾下相應的位置時,啟動HBase表,Region被分配到相應的RegionServer中,且Region會讀取對應的日志文件到自己內部的MemStore中,完成HBase數據恢復。
6.一種HBase數據備份恢復裝置,其特征在于,包括:
備份單元,用于在HBase數據進行備份時,將HBase內存中的數據刷到HFile文件中;為HBase表結構下的每個Region中的每個HFile文件創建相應的引用文件,對每個HBase表的HFile文件進行備份;
恢復單元,用于在HBase數據進行恢復時,若所需要恢復的數據是持久化數據,根據所需要恢復的數據對應的引用文件,進行持久化數據恢復;若所需要恢復的數據是內存數據,根據日志文件,對HBase內存數據進行恢復。
7.根據權利要求6所述的HBase數據備份恢復裝置,其特征在于,所述恢復單元,用于若所需要恢復的數據是持久化數據,根據所需要恢復的數據對應的引用文件,進行持久化數據恢復,包括:
所述恢復單元用于若所需要恢復的數據是持久化數據,將所需要恢復的數據對應的引用文件放入HBase表中對應Region文件夾下,進行持久化數據恢復。
8.根據權利要求6或7所述的HBase數據備份恢復裝置,其特征在于,所述進行持久化數據恢復是在HBase的Region進行合并時整理成完整的數據,合并操作是將多個HFile文件合并成大文件,在達到HBase合并配置參數值時自動觸發。
9.根據權利要求6所述的HBase數據備份恢復裝置,其特征在于,所述日志文件包括執行操作的HBase表、執行操作的HBase表對應的Region和進行的相應執行操作。
10.根據權利要求9所述的HBase數據備份恢復裝置,其特征在于,所述恢復單元,用于若所需要恢復的數據是內存數據,根據日志文件,對HBase內存數據進行恢復,包括:
所述恢復單元用于若所需要恢復的數據是內存數據,根據日志文件中對應的HBase表名稱和Region名稱,將日志文件恢復到相應的Region文件夾下;當引用文件及日志放置到Region文件夾下相應的位置時,啟動HBase表,Region被分配到相應的RegionServer中,且Region會讀取對應的日志文件到自己內部的MemStore中,完成HBase數據恢復。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于浪潮(北京)電子信息產業有限公司;,未經浪潮(北京)電子信息產業有限公司;許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201410483014.3/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





