hadoop 2.7.1安裝和配置

一、安裝環境 

硬體：虛拟機 

​​作業系統​​：Centos 6.4 64位 

IP：192.168.241.128

主機名：admin

安裝使用者：root

二、安裝JDK 

安裝JDK1.7或者以上版本。這裡安裝jdk1.7.0_79。 

下載下傳位址：​​http://www.oracle.com/technetwork/java/javase/downloads/index.html​​ 

1，下載下傳jdk-7u79-​​Linux​​-x64.gz，解壓到/usr/​​Java​​/jdk1.7.0_79。 

2，在/root/.bash_profile中添加如下配置：

3，使環境變量生效，​<code>​#source ~/.bash_profile​</code>​ 

4，安裝驗證​<code>​# java -version​</code>​ 

​​Java ​​version "1.7.0_79"

Java(TM) SE Runtime Environment (build 1.7.0_79-b15)

​​java ​​HotSpot(TM) 64-Bit Server VM (build 24.79-b02, mixed mode)

三，配置SSH無密碼登陸

驗證ssh，​<code>​# ssh localhost​</code>​ 

不需要輸入密碼即可登入。

如果你是叢集的形式，那麼可以參考http://blog.csdn​​.NET​​/se7en_q/article/details/47671425

四，安裝Hadoop2.7

1，下載下傳Hadoop2.7.1 

下載下傳位址：​​http://mirrors.hust.edu.cn/apache/hadoop/common/stable2/hadoop-2.7.1.tar.gz​​

2，解壓安裝 

1），複制 ​​Hadoop​​-2.7.1.tar.gz 到/usr/​​hadoop​​目錄下， 

然後​<code>​#tar -xzvf hadoop-2.7.1.tar.gz​</code>​ 解壓，解壓後目錄為：/usr/hadoop/hadoop-2.7.1 

2），在/usr/hadoop/目錄下，建立tmp、hdfs/name、hdfs/data目錄，執行如下指令 

#mkdir /usr/hadoop/tmp 

#mkdir /usr/hadoop/hdfs 

#mkdir /usr/hadoop/hdfs/data 

#mkdir /usr/hadoop/hdfs/name

3），設定環境變量，​<code>​#vi ~/.bash_profile​</code>​

4)，使環境變量生效，​<code>​$source ~/.bash_profile​</code>​

3，Hadoop配置 

進入$HADOOP_HOME/etc/hadoop目錄，配置 hadoop-env.sh等。涉及的配置檔案如下： 

hadoop-2.7.1/etc/hadoop/hadoop-env.sh 

hadoop-2.7.1/etc/hadoop/yarn-env.sh 

hadoop-2.7.1/etc/hadoop/core-site.xml 

hadoop-2.7.1/etc/hadoop/hdfs-site.xml 

hadoop-2.7.1/etc/hadoop/mapred-site.xml 

hadoop-2.7.1/etc/hadoop/yarn-site.xml

1）配置hadoop-env.sh

2）配置yarn-env.sh

3）配置core-site.xml 

添加如下配置：

4），配置hdfs-site.xml 

添加如下配置

5），配置mapred-site.xml 

6），配置yarn-site.xml 

4，Hadoop啟動 

1）格式化namenode

2）啟動NameNode 和 DataNode 守護程序

3）啟動ResourceManager 和 NodeManager 守護程序

5，啟動驗證 

1）執行jps指令，有如下程序，說明Hadoop正常啟動