如何確定YARN容器的正確數量？

Question

我的問題是關於YARN的配置。 如何確定我的集羣中需要多少容器？ 換句話說，我有什麼要考慮設置每個容器的正確數量的內存/ CPU？

確定尺寸有一些最佳實踐？

感謝。

Answer 1

不能從hortonworks評論，但尺寸應該是一樣的Cloudera

CPU

1 VCORE專用於OS 1 VCORE到HDFS的Datanode 1 VCORE爲節點管理器 供應商代理的1個核心（這純粹用於cloudera，假設存在相同的ambari）

所有其他我將分配到紗線容器。我想一個VCORE多人分配到4

RAM

儲備一些你的操作系統，它取決於你的操作系統，但它會之間4-8GB 帶走RAM爲您的HDFS數據節點&您的節點管理器（分鐘，每個1GB） 帶走其他服務的任何附加RAM 爲紗線分配其餘的紗線。