天天看点

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

一、操作环境

1.ssh

生成公钥:

ssh-keygen -t dsa -P '' -f /root/.ssh/id_dsa

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

追加公钥:

cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

2.jdk

cat /etc/profile

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

source /etc/profile

3.hosts和hostname修改

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

二、hadoop部署

1. 解压包

tar xf hadoop-2.6.5.tar.gz

2.配置path

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

3.修改配置文件

修改如下文件java_home:

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

修改core-site.xml

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

修改core-hdfs.xml

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

修改slaves

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

修改临时文件目录:

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

修改second-namenode配置

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

4.格式化

hdfs namenode -format

5.启动

start-dfs.sh

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

6.WebUI

hadoop单节点搭建一、操作环境二、hadoop部署6.WebUI

7.HDSF指令

创建目录

 hdfs dfs -mkdir -p /user/root

上传文件

hdfs dfs -put /usr/local/software/hadoop/hadoop-2.6.5.tar.gz /user/root

继续阅读