天天看點

啟動第一個Hadoop應用

hadoop叢集安裝成功。啟動: $  bin/start-all.sh

一、檢視Hadoop啟動的情況:

1、檢視程序: $ jps 在各個節點機器上檢視。

啟動第一個Hadoop應用

OK!注意檢視各個節點啟動的程序。

還有以下其他方式檢視Hadoop運作情況。

2、$  bin/hadoop dfsadmin -report    檢視:

啟動第一個Hadoop應用

  3、打開web控制檢視: HDFS監控: http://192.168.1.102:50070

MapReduce監控: http://192.168.1.102:50030

二、啟動第一個Hadoop應用:

1 建立輸入檔案目錄  bin/hadoop fs -mkdir input   

2 複制檔案到輸入目錄 ,把hadoop/conf的xml檔案複制到input目錄  bin/hadoop fs copyFromLocal conf/*.xml input

3 啟動Hadoop自帶例子中的example應用 (統計以dfs開頭的單詞數量) bin/hadoop jar hadoop-examples-1.1.2.jar grep input output 'dfs[a-z.]+' 

啟動第一個Hadoop應用

4 檢視處理的輸出結果  bin/hadoop fs -ls output  bin/hadoop fs -cat /user/hanxb/output/part-00000

啟動第一個Hadoop應用

  5 web檢視統計結果 http://192.168.1.110:50075

啟動第一個Hadoop應用
啟動第一個Hadoop應用
啟動第一個Hadoop應用

繼續閱讀