天天看點

hadoop 參數調優重點參數

yarn的參數調優,必調參數

28>.yarn.nodemanager.resource.memory-mb 

預設為8192。每個節點可配置設定多少實體記憶體給YARN使用,考慮到節點上還 可能有其他程序需要申請記憶體,該值設定為實體記憶體總數/1.3比較合适, 例如128G記憶體的節點可以配置設定100G      

30>.yarn.nodemanager.resource.cpu-vcores

  預設為8。每個節點可配置設定多少虛拟核給YARN使用,通常設為該節點定義 的總虛拟核數即可。       
hadoop 參數調優重點參數