天天看點

先電版大資料平台搭建問題之down機問題

先電版大資料平台搭建問題之down機問題

在部署hadoop叢集過程中,每當安裝進行大約百分之70左右,master節點會出現崩掉現象,自動關機,然後無法啟動執行個體。經查/var/log/libvirt/qemu/下 相關雲主機日志檔案。

先電版大資料平台搭建問題之down機問題

解決步驟:

1, 檢視節點記憶體使用率,控制節點記憶體緊缺,計算節點記憶體充足。 2, 測試,發現web上建立雲主機優先配置設定資源在控制節點上,但控制節點資源不足 3, 手動排程雲主機使用 計算節點資源 指令: nova boot --flavor master --image master.hadoop --nic net-id=ede376f1-6446-4c3f-a4ba-70503e13d659 --availability-zone nova:compute master

總結:

此叢集并非完全分布式叢集,由兩個節點構成,其中一個節點既為master 節點,也是slaver節點。導緻在搭建平台過程中記憶體使用量急劇增加,雲平台控制節點記憶體使用完畢,最終導緻平台崩掉。

繼續閱讀