hadoop多硬盘配置注意点

[一]、实验环境

1.1、环境

1.2、挂载硬盘

开机挂载 vi /etc/fstab :

Shell

/dev/sda1 /bigdata/data0 ext4 defaults 0 0

/dev/sdb1 /bigdata/data1 ext4 defaults 0 0

/dev/sdc1 /bigdata/data2 ext4 defaults 0 0

命令不会使用的可以查阅相关文档，只要注意配置挂载的新目录赋予hadoop用户的读写权限。

[二]、修改hadoop配置

2.1、修改 $HADOOP_HOME/hdfs-site.xml:

XHTML

<name>dfs.namenode.name.dir</name>

<value>/bigdata/data0/dfs/name,/bigdata/data1/dfs/name</value>

</property>

<name>dfs.datanode.data.dir</name>

<value>/bigdata/data0/dfs/data,/bigdata/data1/dfs/data,/bigdata/data2/dfs/data</value>

</property>

2.2、修改 $HADOOP_HOME/mapred-site.xml:

XHTML

<name>mapreduce.cluster.local.dir</name>

<value>/bigdata/data0/mapred/local,/bigdata/data1/mapred/local,/bigdata/data2/mapred/local</value>

</property>

—————– EOF @Michael Sun —————–

http://www.micmiu.com/bigdata/hadoop/hadoop-many-disk-config/

巴特西