[發明專利]一種大數據塊結構化存儲方法及系統在審
| 申請號: | 201910258616.1 | 申請日: | 2019-04-01 |
| 公開(公告)號: | CN110147348A | 公開(公告)日: | 2019-08-20 |
| 發明(設計)人: | 李衛群;蘭海翔;周發輝 | 申請(專利權)人: | 貴州力創科技發展有限公司 |
| 主分類號: | G06F16/13 | 分類號: | G06F16/13;G06F16/185;G06F16/182 |
| 代理公司: | 北京輕創知識產權代理有限公司 11212 | 代理人: | 董德 |
| 地址: | 560003 貴州省貴陽市*** | 國省代碼: | 貴州;52 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 大數據 樹狀文件 結構化存儲 存活周期 大數據塊 分級 歸類 分級存儲 數據遷移 存儲數據量 訪問效率 存儲 | ||
1.一種大數據塊結構化存儲方法,其特征在于:包括以下步驟,
S1,采用數據遷移的方式按存活周期對大數據進行分級歸類;
S2,建立樹狀文件系統,并將按存活周期進行分級歸類的大數據導入到所述樹狀文件系統;
S3,利用分級存儲的原理將所述大數據存儲在所述樹狀文件系統的對應節點上。
2.根據權利要求1所述的一種大數據塊結構化存儲方法,其特征在于:在所述S1中,還包括對所述大數據進行過濾,并將過濾后的所述大數據采用數據遷移的方式按存活周期進行分級歸類。
3.根據權利要求1或2所述的一種大數據塊結構化存儲方法,其特征在于:在所述S2中,具體根據所述大數據的分級歸類級數建立所述樹狀文件系統。
4.根據權利要求3所述的一種大數據塊結構化存儲方法,其特征在于:所述樹狀文件系統的節點數與所述大數據的分級歸類級數相匹配。
5.根據權利要求1或2所述的一種大數據塊結構化存儲方法,其特征在于:所述樹狀文件系統具體為HBase類型的數據庫。
6.一種大數據塊結構化存儲系統,其特征在于:包括以下模塊,
分級歸類模塊,其用于采用數據遷移的方式按存活周期對大數據進行分級歸類;
樹狀文件系統建立模塊,其用于建立樹狀文件系統,并將按存活周期進行分級歸類的大數據導入到所述樹狀文件系統;
分級存儲模塊,其用于利用分級存儲的原理將所述大數據存儲在所述樹狀文件系統的對應節點上。
7.根據權利要求6所述的一種大數據塊結構化存儲系統,其特征在于:所述分級歸類模塊還用于對所述大數據進行過濾,并將過濾后的所述大數據采用數據遷移的方式按存活周期進行分級歸類。
8.根據權利要求6或7所述的一種大數據塊結構化存儲系統,其特征在于:所述樹狀文件系統建立模塊具體用于根據所述大數據的分級歸類級數建立所述樹狀文件系統。
9.根據權利要求8所述的一種大數據塊結構化存儲系統,其特征在于:所述樹狀文件系統的節點數與所述大數據的分級歸類級數相匹配。
10.根據權利要求6或7所述的一種大數據塊結構化存儲系統,其特征在于:所述樹狀文件系統具體為HBase類型的數據庫。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于貴州力創科技發展有限公司,未經貴州力創科技發展有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910258616.1/1.html,轉載請聲明來源鉆瓜專利網。





