[發明專利]一種hadoop集群搭建磁盤亂序的解決方法

在審

• 申請號: 201210380535.7
• 申請日: 2012-10-09
• 公開（公告）號: CN102929561A
• 公開（公告）日: 2013-02-13
• 發明（設計）人: 楊鑫
• 申請（專利權）人: 曙光信息產業（北京）有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京安博達知識產權代理有限公司 11271
• 代理人: 徐國文

技術領域

本發明屬于云計算技術領域，具體涉及一種hadoop集群搭建磁盤亂序的解決方法。

背景技術

目前，hadoop基于其強勁優勢，得到了業界眾多公司的青睞和大力支持，已經在互聯網領域遍地開花。有公司用hadoop支持廣告系統和Web搜索的研究；有公司用hadoop支持其數據分析和機器學習；有公司用Hadoop進行搜索日志的分析和網頁數據的挖掘工作；也有公司用Hadoop系統存儲并處理電子商務交易的相關數據。隨著計算機技術和通信技術的發展和融合，Hadoop的應用也會從互聯網領域向電信、電子商務、銀行、生物制藥等領域拓展。

Hadoop框架中最核心的設計就是：MapReduce和HDFS。Hadoop的架構如圖1所示。

Hadoop環境架設好后，每次重起機器，會出現磁盤盤符的亂序。比如，機器重起前掛載的順序是：

/hdfs/data1->sda1；

/hdfs/data2->sdb1;

/hdfs/data3->sdc1;

/hdfs/data4->sdd1;????......

機器重起后掛載的順序是：

/hdfs/data1->sdd1；

/hdfs/data2->sda1;

/hdfs/data3->sdb1;

/hdfs/data4->sda1;????......

從而導致DataNode無法起來。

發明內容

為了克服上述現有技術的不足，本發明提供一種hadoop集群搭建磁盤亂序的解決方法，通過UUID解決磁盤亂序問題，不會再出現重新NameNode格式化后，DataNode無法起動的現象。

為了實現上述發明目的，本發明采取如下技術方案：

一種hadoop集群搭建磁盤亂序的解決方法，所述方法包括：

步驟1：查詢磁盤設備的UUID；

步驟2：修改/etc/fstab文件；

步驟3：將磁盤掛載。

所述步驟1中，根據ls-la/dev/disk/by-uuid查詢磁盤設備的UUID。

所述步驟2中，修改/etc/fstab文件，通過VIM命令，在/etc/fstab文件的末尾加入UUID的相關信息，將每個磁盤的UUID與需要被掛載的相關目錄綁定。

所述步驟3中，通過mount命令將磁盤掛載到相關的目錄。

與現有技術相比，本發明的有益效果在于：本發明提供一種hadoop集群搭建磁盤亂序的解決方法，通過UUID解決磁盤亂序問題，不會再出現重新NameNode格式化后，DataNode無法起動的現象，該方法簡單可靠，易執行。

附圖說明

圖1是Hadoop的架構圖；

圖2是hadoop集群搭建磁盤亂序的解決方法流程圖。

具體實施方式

下面結合附圖對本發明作進一步詳細說明。

如圖2，本發明提供一種hadoop集群搭建磁盤亂序的解決方法，所述方法包括：

步驟1：查詢磁盤設備的UUID號；

步驟2：修改/etc/fstab文件；

步驟3：將磁盤掛載。

所述步驟1中，根據ls-la/dev/disk/by-uuid查詢磁盤設備的UUID號。

如：

lrwxrwxrwx.1?root?root?10?Aug?15?11:07?27f8bc60-3c63-41e4-a3bc-fac625775238->../../sda1

lrwxrwxrwx.1?root?root?10?Aug?15?11:07?3210d886-cd42-439c-900f-010210fe385f->../../sdb1

lrwxrwxrwx?1?root?root?10?Aug?15?11:07?fe6bd727-bdc6-4af9-b80c-7876ed8d557b->../../sdc1

lrwxrwxrwx.1?root?root?10?Aug?15?11:07?b868c920-427e-454f-8d3b-20b76b5ec207->../../sdd1????......