從零自學Hadoop(06)：叢集搭建

上一篇，我們把Ambari的環境基本搭建好了，那麼我們趁熱打鐵，打造我們的第一個HDP叢集，這樣，離我們下一步就越來越近了，在安裝中還是會碰到很多想不到的情況的。是以，注意分析，找到解決方法很重要。

　　對了，這裡我們還是多搭建了一個機器H34,怕叢集機器不夠。大家按照原來的步驟在做一個吧。

閱讀目錄

• 序
• 叢集搭建
• 監控
• 系列索引

本文版權歸mephisto和部落格園共有，歡迎轉載，但須保留此段聲明，并給出原文連結，謝謝合作。

文章是哥(mephisto)寫的，SourceLink

　　上一篇，我們把Ambari的環境基本搭建好了，那麼我們趁熱打鐵，打造我們的第一個HDP叢集，這樣，離我們下一步就越來越近了，在安裝中還是會碰到很多想不到的情況的。是以，注意分析，找到解決方法很重要。

一：登陸

　　使用我們設定的Ambari伺服器登陸，還記得麼，在H30上面。

二：主界面

　　我們看到圈起來的地方就是我們要搭建叢集的地方。

三：建立叢集

　　這裡，我們使用MyCluster作為我們第一個叢集的名稱。

四：選擇HDP版本和源

　　我們當然選擇最新的HDP2.3，玩就玩最新的，要不老是在别人後面，多不好啊。

　　這裡我們得設定HDP和 HDP-UTILS的源，我們已經搭建好了倉庫，可以直接使用本地源了。

五：将SSH私有Key放到本機

　　由于是頁面登陸，當然如果H30開啟了GUI界面，是可以不用這個操作的。

　　目前我們使用的沒有GUI界面的Linux，是以，得在浏覽器使用的機器上能使用的到ssh private key。

　　過程很簡單，就不上圖了。

六：選擇帶叢集的機器

　　這裡我們選擇了事前準備好的H31,H32,H33這3台機器，由于本機的性能一般，很快記憶體，IO就占滿了，是以沒有使用很多的機器做叢集。

七：修改ambari.repo檔案

vim /etc/yum.repos.d/ambari.repo      

　　将線上庫改成本地的http資源。

八：Confirm Hosts

　　核實主機群。確定這裡待叢集主機有符合的運作環境。

九：選擇待安裝庫

　　我們根據自己的需要來選擇帶安裝的。

十：叢集結構搭建

　　我們選擇H31作為主NameNode,H32作為Second NameNode。

十一：叢集結構搭建2

　　選擇H31，H32作為NodeManager,H33,H34作為DataNode

十二：自定義服務群

　　這裡，一半NameNode需要比較大記憶體的，但是沒辦法，是以 這裡也不自定義修改了，就那麼多，全用了。

十三：Review

　　Review下我們的配置情況。

十四：Deploy

　　開始安裝等環節了。

十五：Deploy2

　　我們可以看到success了。

十六：Summary

　　安裝過程的總結。

一：儀表盤

　　在這裡，我們可以全面，直覺的看到整個叢集的運作情況，可以大大的提高了運維的效率。

二：服務

　　在這裡，可以看到例如HDFS,Zookeeper,SparK這些服務的情況。

三：Hosts

　　我們可以看到，叢集中所有的主機資訊，狀态。

四：報警

　　如果叢集中出現了什麼問題，這裡是可以實時的監控的到的，很是友善。

　　　　　　　　　　 　　到此，我們這章節的内容已經完畢，基本上環境搭建的部分告一段落，後面我們就是對HDP的應用了。

　　【源】從零自學Hadoop系列索引

博文作者：mephisto

博文出處：http://www.cnblogs.com/mephisto

本文版權歸作者和部落格園共有，歡迎轉載，但須保留此段聲明，并給出原文連結，謝謝合作！

如果閱讀了本文章，覺得有幫助，您可以選擇捐助我：