天天看点

单机Hadoop安装以及用单词计数来测试

一、配置网卡

1、进入配置文件中进行配置

1)、进入代码

cd /etc/sysconfig/network-scripts
vi ifcfg-eth0
 
           

2)、配置文件

	TYPE=Ethernet
	BOOTPROTO=static
	DEFROUTE=yes
	IPV4_FAILURE_FATAL=no
	NAME=eth0
	#UUID=70ea9a1f-92d8-4f45-9172-eec10957f5e7
	DEVICE=eth0
	ONBOOT=yes
	IPADDR=192.168.56.11 ( 这里是你要配置的IP地址号)
	NETMASK=255.255.255.0
	GATEWAY=192.168.56.2
           

二、上传jdk并进行配置

1、创建目录

单机Hadoop安装以及用单词计数来测试

2、进入test文件上传jdk

单机Hadoop安装以及用单词计数来测试

3、解压jdk

tar -zxvf jdk-7u40-linux-x64.tar.gz -C /usr/java (/usr/java 是你要保存的路径)
           
单机Hadoop安装以及用单词计数来测试

4、进行配置jdk

1)进入文件 vi /etc/profile

export JAVA_HOME=/usr/java/jdk1.7.0_40  ( /usr/java 是你的存储位置)
export PATH=$PATH:$JAVA_HOME/bin
           
单机Hadoop安装以及用单词计数来测试

2)、进行刷新文件(source /etc/profile)

3)、查看jdk

单机Hadoop安装以及用单词计数来测试

三、安装Hadoop

1、上传Hadoop

单机Hadoop安装以及用单词计数来测试

2、解压Hadoop

tar -zxvf hadoop-2.2.0.tar.gz -C /usr/had (/usr/had 是你要保存的路径)
           
单机Hadoop安装以及用单词计数来测试

四、进行单词计数测试

1、建立文件为 a.input

单机Hadoop安装以及用单词计数来测试

2、进入到Hadoop中,在进入share, 在进入Hadoop,在进入 mapreduce,复制具有计数功能的hadoop-mapreduce-examples-2.2.0.jar 

3,在返回到Hadoop-2.2.0 中写:

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /usr/a.input output1
           
单机Hadoop安装以及用单词计数来测试

4、查看结果

bin/hadoop fs -cat output1/part-r-00000
           
单机Hadoop安装以及用单词计数来测试