大数据学习之部署Hadoop

core-site.xml

<!– oozie server的hostname –>

<property>

<name>hadoop.proxyuser.atguigu.hosts</name>

<value>*</value>

</property>

<!– 允许被oozie代理的用户组 –>

<name>hadoop.proxyuser.atguigu.groups</name>

mapred-site.xml

<!– 配置 mapreduce jobhistory server 地址 ，默认端口10020 –>

<name>mapreduce.jobhistory.address</name>

<value>hadoop102:10020</value>

<!– 配置 mapreduce jobhistory server web ui 地址， 默认端口19888 –>

<name>mapreduce.jobhistory.webapp.address</name>

<value>hadoop102:19888</value>

yarn-site.xml

<!– 任务历史服务 –>

<name>yarn.log.server.url</name>

<value>http://hadoop102:19888/jobhistory/logs/</value>

完成后：记得scp同步到其他机器节点

[atguigu@hadoop102 hadoop-2.7.2]$ sbin/start-dfs.sh

[atguigu@hadoop103 hadoop-2.7.2]$ sbin/start-yarn.sh

[atguigu@hadoop102 hadoop-2.7.2]$ sbin/mr-jobhistory-daemon.sh start historyserver

注意：需要开启jobhistoryserver, 最好执行一个mr任务进行测试。