天天看点

2.2hadoop伪分布式---Wordcount.java配置和运行

Hadoop和eclipse均配置完成,本节主要是在Java中运行一个分布式程序Wordcount

2.2.1环境变量配置

1) 将 hadoop -eclipse -plugin -0.20.3 -SNAPSHOT.jar 放在 eclipse 下 dropins 目录中,重启 Eclipse 。

2.2hadoop伪分布式---Wordcount.java配置和运行

2)Window —— >Preferences —— >Hadoop Map/Reduce >Hadoop Map/Reduce 设置 Hadoop installation directory ,

2.2hadoop伪分布式---Wordcount.java配置和运行

3)Window —— >Open Perspective —— >Map/Reduce —— >OK ,

2.2hadoop伪分布式---Wordcount.java配置和运行

4)Map/Reduce Location —— >右击 Location —— >New Hadoop location

2.2hadoop伪分布式---Wordcount.java配置和运行

5)配置general

2.2hadoop伪分布式---Wordcount.java配置和运行

6)配置Advanced parameters

2.2hadoop伪分布式---Wordcount.java配置和运行

7)File —— >New —— >Map/Reduce Project —— >next

输入Wordcount

2.2hadoop伪分布式---Wordcount.java配置和运行

8)建立org.apache.hadoop.examples包,并在包下建立WordCount类,

2.2hadoop伪分布式---Wordcount.java配置和运行

9)把Hadoop-0.20.2/src/exapmles/org/apache下的WordCount.java文件内容copy到新建的Java类里

2.2hadoop伪分布式---Wordcount.java配置和运行

9)建立input文件

在桌面建立file01.TXT文件,上传到input文件中,右击刷新文件夹

2.2hadoop伪分布式---Wordcount.java配置和运行

10)配置运行参数,点击apply,注不要点击run

2.2hadoop伪分布式---Wordcount.java配置和运行

11)Run as ----->run on  hadoop

2.2hadoop伪分布式---Wordcount.java配置和运行

到此第一个分布式程序配置和运行运行均完成

继续阅读