Hadoop安装

Hadoop安装

一、 Hadoop

1、 安装

安装并配置hadoop-2.6.4(在master中)

(1)将hadoop-2.6.4.tar.gz安装包复制到hadoop文件目录下（与windows环境下类似）。

(2)解压hadoop-2.6.4.tar.gz

cd

cd hadoop

tar -zxvf  hadoop-2.6.4.tar.gz

添加环境变量：vim /etc/profile

在最后添加

# set hadoop environment

export HADOOP_HOME=/usr/hadoop-2.6.2

exportPATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

生效：source /etc/profile

配置Hadoop (cd /usr/hadoop-2.6.2)

1、vi core-site.xml

               hadoop.tmp.dir

                /usr/hadoop-2.6.2/tmp

                Abase forother temporary directories.

               fs.defaultFS

               hdfs://master:9000

               io.file.buffer.size

                4096

2、vi hadoop-env.sh 在开头加上exportJAVA_HOME=/usr/jdk1.7.0_79

3、vi yarn-env.sh 在开头加上exportJAVA_HOME=/usr/jdk1.7.0_79

4、vi hdfs-site.xml

7、vi slaves

slave1

slave2

8、复制到slave上scp -r/usr/hadoop-2.6.2/ root@slave1:/usr/

9、配置slave上的Hadoop环境变量

添加环境变量：vim /etc/profile

在最后添加

# set hadoop environment

export HADOOP_HOME=/usr/local/hadoop-2.8.4

export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

生效：source /etc/profile

10、启动

先启动hadoop集群start-all.sh