hadoop單節點搭建

一、操作環境

1.ssh

生成公鑰：

ssh-keygen -t dsa -P '' -f /root/.ssh/id_dsa

追加公鑰:

cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

2.jdk

cat /etc/profile

source /etc/profile

3.hosts和hostname修改

二、hadoop部署

1. 解壓包

tar xf hadoop-2.6.5.tar.gz

2.配置path

3.修改配置檔案

修改如下檔案java_home：

修改core-site.xml

修改core-hdfs.xml

修改slaves

修改臨時檔案目錄：

修改second-namenode配置

4.格式化

hdfs namenode -format

5.啟動

start-dfs.sh

6.WebUI

7.HDSF指令

建立目錄

 hdfs dfs -mkdir -p /user/root

上傳檔案

hdfs dfs -put /usr/local/software/hadoop/hadoop-2.6.5.tar.gz /user/root