[發(fā)明專利]一種數(shù)據(jù)處理方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201810367047.X
• 申請(qǐng)日: 2018-04-23
• 公開（公告）號(hào): CN108614749B
• 公開（公告）日: 2020-11-03
• 發(fā)明（設(shè)計(jì)）人: 周淵婓
• 申請(qǐng)（專利權(quán)）人: 北京搜狐新媒體信息技術(shù)有限公司
• 主分類號(hào): G06F11/14
• 分類號(hào): G06F11/14
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 李金;王寶筠

1.一種數(shù)據(jù)處理方法，其特征在于，所述方法包括：

獲取待存儲(chǔ)的原始數(shù)據(jù)，并將所述待存儲(chǔ)的原始數(shù)據(jù)劃分成至少兩個(gè)數(shù)據(jù)塊；

利用第一算法對(duì)所述至少兩個(gè)數(shù)據(jù)塊進(jìn)行編碼，得到所述至少兩個(gè)數(shù)據(jù)塊對(duì)應(yīng)的至少一個(gè)第一編碼塊；

利用第二算法對(duì)所述至少兩個(gè)數(shù)據(jù)塊進(jìn)行編碼，得到所述至少兩個(gè)數(shù)據(jù)塊對(duì)應(yīng)的至少一個(gè)第二編碼塊，其中所述第一算法和所述第二算法中有一個(gè)算法的數(shù)據(jù)恢復(fù)速率優(yōu)于另一個(gè)算法的數(shù)據(jù)恢復(fù)速率；

將所述至少兩個(gè)數(shù)據(jù)塊、所述至少一個(gè)第一編碼塊和所述至少一個(gè)第二編碼塊存儲(chǔ)至不同機(jī)房的機(jī)架式服務(wù)器中，其中任一機(jī)房的機(jī)架式服務(wù)器中存儲(chǔ)有：所述至少兩個(gè)數(shù)據(jù)塊中的至少一個(gè)數(shù)據(jù)塊；所述至少一個(gè)第一編碼塊或所述至少一個(gè)第二編碼塊。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：對(duì)任一機(jī)房：在確定該機(jī)房的機(jī)架式服務(wù)器發(fā)生機(jī)房級(jí)別故障的情況下，從其他沒有發(fā)生故障的機(jī)房的機(jī)架式服務(wù)器中獲取數(shù)據(jù)塊和編碼塊，其中所獲取的數(shù)據(jù)塊和編碼塊用于恢復(fù)該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊；

利用所獲取的編碼塊對(duì)應(yīng)的算法，對(duì)所獲取的編碼塊和數(shù)據(jù)塊進(jìn)行處理，得到該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊。

3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述方法還包括：對(duì)任一機(jī)房：在確定該機(jī)房的機(jī)架式服務(wù)器發(fā)生機(jī)架級(jí)別故障的情況下，從其他沒有發(fā)生故障的機(jī)房的機(jī)架式服務(wù)器中獲取數(shù)據(jù)塊和編碼塊，其中所獲取的數(shù)據(jù)塊和編碼塊用于恢復(fù)該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊；

根據(jù)預(yù)設(shè)規(guī)則從所述第一算法和所述第二算法中選取一個(gè)算法；

利用所選取的算法，對(duì)所獲取的數(shù)據(jù)塊和編碼塊進(jìn)行處理，得到該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)預(yù)設(shè)規(guī)則從所述第一算法和所述第二算法中選取一個(gè)算法包括：

從所述第一算法和所述第二算法中隨機(jī)選取一個(gè)算法；

或者

從所述第一算法和所述第二算法中選取數(shù)據(jù)恢復(fù)速率優(yōu)于沒有被選取算法的數(shù)據(jù)恢復(fù)速率的算法。

5.一種數(shù)據(jù)處理裝置，其特征在于，所述裝置包括：

獲取單元，用于獲取待存儲(chǔ)的原始數(shù)據(jù)，并將所述待存儲(chǔ)的原始數(shù)據(jù)劃分成至少兩個(gè)數(shù)據(jù)塊；

編碼單元，用于利用第一算法對(duì)所述至少兩個(gè)數(shù)據(jù)塊進(jìn)行編碼，得到所述至少兩個(gè)數(shù)據(jù)塊對(duì)應(yīng)的至少一個(gè)第一編碼塊，以及利用第二算法對(duì)所述至少兩個(gè)數(shù)據(jù)塊進(jìn)行編碼，得到所述至少兩個(gè)數(shù)據(jù)塊對(duì)應(yīng)的至少一個(gè)第二編碼塊，其中所述第一算法和所述第二算法中有一個(gè)算法的數(shù)據(jù)恢復(fù)速率優(yōu)于另一個(gè)算法的數(shù)據(jù)恢復(fù)速率；

存儲(chǔ)單元，用于將所述至少兩個(gè)數(shù)據(jù)塊、所述至少一個(gè)第一編碼塊和所述至少一個(gè)第二編碼塊存儲(chǔ)至不同機(jī)房的機(jī)架式服務(wù)器中，其中任一機(jī)房的機(jī)架式服務(wù)器中存儲(chǔ)有：所述至少兩個(gè)數(shù)據(jù)塊中的至少一個(gè)數(shù)據(jù)塊；所述至少一個(gè)第一編碼塊或所述至少一個(gè)第二編碼塊。

6.根據(jù)權(quán)利要求5所述的裝置，其特征在于，所述獲取單元，還用于對(duì)任一機(jī)房：在確定該機(jī)房的機(jī)架式服務(wù)器發(fā)生機(jī)房級(jí)別故障的情況下，從其他沒有發(fā)生故障的機(jī)房的機(jī)架式服務(wù)器中獲取數(shù)據(jù)塊和編碼塊，其中所獲取的數(shù)據(jù)塊和編碼塊用于恢復(fù)該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊；

所述裝置還包括：第一恢復(fù)單元，用于利用所獲取的編碼塊對(duì)應(yīng)的算法，對(duì)所獲取的編碼塊和數(shù)據(jù)塊進(jìn)行處理，得到該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊。

7.根據(jù)權(quán)利要求5或6所述的裝置，其特征在于，所述獲取單元，還用于對(duì)任一機(jī)房：在確定該機(jī)房的機(jī)架式服務(wù)器發(fā)生機(jī)架級(jí)別故障的情況下，從其他沒有發(fā)生故障的機(jī)房的機(jī)架式服務(wù)器中獲取數(shù)據(jù)塊和編碼塊，其中所獲取的數(shù)據(jù)塊和編碼塊用于恢復(fù)該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊；

所述裝置還包括：選取單元和第二恢復(fù)單元；所述選取單元，用于根據(jù)預(yù)設(shè)規(guī)則從所述第一算法和所述第二算法中選取一個(gè)算法；所述第二恢復(fù)單元，用于利用所選取的算法，對(duì)所獲取的數(shù)據(jù)塊和編碼塊進(jìn)行處理，得到該機(jī)房的機(jī)架式服務(wù)器中丟失的數(shù)據(jù)塊。