Hadoop安裝-分布式-Fully

〇、所需資料

一、配置

1、基礎配置

（1）系統安裝

（2）hostname主機名配置

（3）ip位址、dns、hosts映射檔案配置

（4）關閉防火牆與selinux

（5）開啟ntpd時鐘同步

（6）jdk安裝與環境變量配置

（7）機器克隆、配置

（8）ssh免密設定

2、部署配置

（1）包含内容

（2）hadoop環境變量配置

vi /etc/profile

（3）etc/hadoop下配置-core-site.xml

<configuration>
<property>
    <name>fs.defaultFS</name>
    <value>hdfs://hadoop01:9000</value>
</property>
<property>
    <name>hadoop.tmp.dir</name>
    <value>/var/bigdata/tmp/hadoop/full</value>
</property>
</configuration>      

（4）etc/hadoop下配置-hdfs-site.xml

<configuration>
<property>
    <name>dfs.replication</name>
    <value>2</value>
</property>
<property>
    <name>dfs.namenode.name.dir</name>
    <value>/var/bigdata/hadoop/full/dfs/name</value>
</property>
<property>
    <name>dfs.datanode.data.dir</name>
    <value>/var/bigdata/hadoop/full/dfs/data</value>
</property>
<property>
    <name>dfs.namenode.secondary.http-address</name>
    <value>hadoop02:50090</value>
</property>
<property>
    <name>dfs.namenode.checkpoint.dir</name>
    <value>/var/bigdata/hadoop/full/dfs/secondary</value>
</property>
</configuration>      

（3）etc/hadoop下配置-slave配置dn

hadoop02
hadoop03      

（4）目錄分發到其他節點

scp -r ./hadoop/ hadoop02:​

​pwd​

​

二、啟動

1、nn格式化

bin/hdfs namenode -format

2、啟動dfs

sbin/start-dfs.sh

三、驗證

1、nn驗證

2、dn驗證

3、頁面驗證