[發(fā)明專利]分布式文件系統(tǒng)中的文件處理方法及裝置

有效

• 申請?zhí)枺?/td>: 201210127060.0
• 申請日: 2012-04-26
• 公開（公告）號: CN102708165A
• 公開（公告）日: 2012-10-03
• 發(fā)明（設(shè)計(jì)）人: 唐金根;袁洪錦
• 申請（專利權(quán)）人: 華為軟件技術(shù)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京同立鈞成知識產(chǎn)權(quán)代理有限公司 11205
• 代理人: 劉芳

1.一種分布式文件系統(tǒng)中的文件處理方法，其特征在于，包括：

接收用戶的文件操作請求，所述文件操作請求中至少攜帶文件描述信息及操作類型；

根據(jù)所述文件描述信息在元數(shù)據(jù)服務(wù)器的全部節(jié)點(diǎn)中確定用于存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)，所述元數(shù)據(jù)服務(wù)器的全部節(jié)點(diǎn)形成分布式哈希表網(wǎng)絡(luò)；

根據(jù)所述文件描述信息在數(shù)據(jù)塊服務(wù)器的全部節(jié)點(diǎn)中確定用于存儲文件數(shù)據(jù)塊的塊主節(jié)點(diǎn)，所述數(shù)據(jù)塊服務(wù)器的全部節(jié)點(diǎn)形成分布式哈希表網(wǎng)絡(luò)；

根據(jù)所述操作類型完成與所述元主節(jié)點(diǎn)以及所述塊主節(jié)點(diǎn)之間的操作。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述文件描述信息在元數(shù)據(jù)服務(wù)器的全部節(jié)點(diǎn)中確定用于存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)，包括：

根據(jù)所述文件描述信息的哈希值，獲得文件關(guān)鍵字的標(biāo)識符；

在已知的元數(shù)據(jù)服務(wù)器的節(jié)點(diǎn)標(biāo)識符中，如果存在節(jié)點(diǎn)標(biāo)識符等于所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)，則所述節(jié)點(diǎn)為用于存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)；如果不存在節(jié)點(diǎn)標(biāo)識符等于所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)，則獲得節(jié)點(diǎn)標(biāo)識符最接近所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)作為存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，如果不存在節(jié)點(diǎn)標(biāo)識符等于所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)，所述獲得的元主節(jié)點(diǎn)的節(jié)點(diǎn)標(biāo)識符大于所述文件關(guān)鍵字的標(biāo)識符。

4.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的方法，其特征在于，所述操作類型為存儲文件或讀取文件；所述根據(jù)所述操作類型完成與所述元主節(jié)點(diǎn)以及所述塊主節(jié)點(diǎn)之間的操作包括：

當(dāng)所述操作類型為存儲文件時(shí)，將待存儲文件的元數(shù)據(jù)發(fā)送給所述元主節(jié)點(diǎn)，以使所述元主節(jié)點(diǎn)對所述待存儲文件的元數(shù)據(jù)進(jìn)行保存；將待存儲文件發(fā)送給所述塊主節(jié)點(diǎn)，以使所述塊主節(jié)點(diǎn)對所述待存儲文件進(jìn)行保存；

當(dāng)所述操作類型為讀取文件時(shí)，從所述元主節(jié)點(diǎn)上讀取所述文件描述信息對應(yīng)的文件元數(shù)據(jù)，從所述塊主節(jié)點(diǎn)上讀取所述文件描述信息對應(yīng)的文件塊數(shù)據(jù)。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述將待存儲文件發(fā)送給所述塊主節(jié)點(diǎn)之前，所述方法還包括：

對所述待存儲文件進(jìn)行切片；

相應(yīng)的，所述將待存儲文件發(fā)送給所述塊主節(jié)點(diǎn)，以使所述塊主節(jié)點(diǎn)對所述待存儲文件進(jìn)行保存包括：

將切片后的數(shù)據(jù)發(fā)送給所述塊主節(jié)點(diǎn)，以使所述塊主節(jié)點(diǎn)對所述切片后的數(shù)據(jù)進(jìn)行保存。

6.一種分布式文件系統(tǒng)中的文件裝置，其特征在于，包括：

接收模塊，用于接收用戶的文件操作請求，所述文件操作請求中至少攜帶文件描述信息及操作類型；

路由確定模塊，用于根據(jù)所述文件描述信息在元數(shù)據(jù)服務(wù)器的全部節(jié)點(diǎn)中確定用于存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)，所述元數(shù)據(jù)服務(wù)器的全部節(jié)點(diǎn)形成分布式哈希表網(wǎng)絡(luò)；根據(jù)所述文件描述信息在數(shù)據(jù)塊服務(wù)器的全部節(jié)點(diǎn)中確定用于存儲文件數(shù)據(jù)塊的塊主節(jié)點(diǎn)，所述數(shù)據(jù)塊服務(wù)器的全部節(jié)點(diǎn)形成分布式哈希表網(wǎng)絡(luò)；

處理模塊，用于根據(jù)所述操作類型完成與所述元主節(jié)點(diǎn)以及所述塊主節(jié)點(diǎn)之間的操作。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述路由確定模塊包括：

哈希計(jì)算單元，用于根據(jù)所述文件描述信息的哈希值，獲得文件關(guān)鍵字的標(biāo)識符；

路由確定單元，用于在已知的元數(shù)據(jù)服務(wù)器的節(jié)點(diǎn)標(biāo)識符中，如果存在節(jié)點(diǎn)標(biāo)識符等于所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)，則所述節(jié)點(diǎn)為用于存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)；如果不存在節(jié)點(diǎn)標(biāo)識符等于所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)，則獲得節(jié)點(diǎn)標(biāo)識符最接近所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)作為存儲文件元數(shù)據(jù)的元主節(jié)點(diǎn)。

8.根據(jù)權(quán)利要求7所述的裝置，其特征在于，所述路由確定單元還用于：如果不存在節(jié)點(diǎn)標(biāo)識符等于所述文件關(guān)鍵字的標(biāo)識符的節(jié)點(diǎn)，所述獲得的元主節(jié)點(diǎn)的節(jié)點(diǎn)標(biāo)識符大于所述文件關(guān)鍵字的標(biāo)識符。

9.根據(jù)權(quán)利要求6至8中任一項(xiàng)所述的裝置，其特征在于，所述操作類型為存儲文件或讀取文件；所述處理模塊包括：

發(fā)送單元，用于當(dāng)所述操作類型為存儲文件時(shí)，將待存儲文件的元數(shù)據(jù)發(fā)送給所述元主節(jié)點(diǎn)，以使所述元主節(jié)點(diǎn)對所述待存儲文件的元數(shù)據(jù)進(jìn)行保存；將待存儲文件發(fā)送給所述塊主節(jié)點(diǎn)，以使所述塊主節(jié)點(diǎn)對所述待存儲文件進(jìn)行保存；

讀取單元，用于當(dāng)所述操作類型為讀取文件時(shí)，從所述元主節(jié)點(diǎn)上讀取所述文件描述信息對應(yīng)的文件元數(shù)據(jù)，從所述塊主節(jié)點(diǎn)上讀取所述文件描述信息對應(yīng)的文件塊數(shù)據(jù)。

10.根據(jù)權(quán)利要求9所述的裝置，其特征在于，所述處理模塊還包括：

切片單元，用于對所述待存儲文件進(jìn)行切片；

相應(yīng)的，所述發(fā)送單元包括：將切片后的數(shù)據(jù)發(fā)送給所述塊主節(jié)點(diǎn)，以使所述塊主節(jié)點(diǎn)對所述切片后的數(shù)據(jù)進(jìn)行保存。