[發明專利]一種數據多副本混合存儲方法及系統有效
| 申請號: | 201310368095.8 | 申請日: | 2013-08-21 |
| 公開(公告)號: | CN103440301A | 公開(公告)日: | 2013-12-11 |
| 發明(設計)人: | 王穎;狄靜舒;宋懷明;苗艷超;劉新春;邵宗有 | 申請(專利權)人: | 曙光信息產業股份有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30;G06F11/14;H04L29/08 |
| 代理公司: | 北京新知遠方知識產權代理事務所(普通合伙) 11397 | 代理人: | 張艷 |
| 地址: | 300384 天津市西青區華*** | 國省代碼: | 天津;12 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據 副本 混合 存儲 方法 系統 | ||
1.一種數據多副本混合存儲方法,其特征在于,包括以下步驟:
在數據加載階段,將原始數據進行多次分區,每次分區采用不同的分區方式;
將每次分區所得到的分區數據存儲到多個服務器上。
2.如權利要求1所述的數據多副本混合存儲方法,其特征在于,所述分區方式為范圍Range分區、散列Hash分區、列表分區或混合分區。
3.如權利要求1所述的數據多副本混合存儲方法,其特征在于,將每次分區所得到的分區數據按存儲負載均衡原則、訪問負載均衡原則或數據可靠性原則存儲到各服務器上。
4.一種數據多副本混合存儲系統,其特征在于,包括:
分區模塊,用于在數據加載階段,將原始數據進行多次分區,其中,每次分區采用不同的分區方式;
服務器,用于存儲每次分區所得到的分區數據。
5.如權利要求4所述的數據多副本混合存儲系統,其特征在于,所述分區模塊具體用于按照范圍Range分區、散列分區Hash分區、列表分區或混合分區方式將原始數據進行多次分區。
6.如權利要求4所述的數據多副本混合存儲系統,其特征在于,所述服務器具體用于根據存儲負載均衡原則、訪問負載均衡原則或數據可靠性原則存儲每次分區所得到的分區數據。
7.一種數據處理方法,其特征在于,包括以下步驟:
在數據加載階段,將多組數據進行多次分區,每次分區采用不同的分區方式,每次分區時各組數據的分區方式相同;
將各次分區所得到的分區數據存儲到多個服務器中;其中,所述多組數據在同一次分區中得到的具有相同屬性的分區數據存儲于同一服務器中。
8.如權利要求7所述的數據處理方法,其特征在于,所述具有相同屬性的分區數據為:各組數據每次分區后,不同組數據之間屬性值相同的分區數據。
9.如權利要求7所述的數據處理方法,其特征在于,所述分區方式為范圍Range分區、散列Hash分區、列表分區或混合分區。
10.如權利要求7所述的數據處理方法,其特征在于,所述數據處理方法具體用于聯機分析處理大數據分析應用場景。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于曙光信息產業股份有限公司,未經曙光信息產業股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201310368095.8/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





