1
我有一個基於C++的MapReduce作業，我正在使用Hadoop流。如何在Hadoop流中爲每個節點設置最大數量的reducer？
但是，即使在命令行配置中將它們設置爲18爲mapred.tasktracker.reduce.tasks.maximum=18，但每個節點的最大減速器數最多爲7;
是否有其他方法阻止減速器發出更多減速任務？
A
回答
1
修改mapred.tasktracker.reduce.tasks.maximum屬性後，是否重新啓動羣集中的任務跟蹤器？您應該能夠進入Job Tracker web ui頁面並確認每個任務跟蹤器現在都配置了18個減速機插槽
相關問題
- 1. Hadoop Streaming-設置每個節點的最大地圖數
- 2. 如何設置hadoop中的節點數量？
- 3. 如何最大化每個btree節點的元素數量
- 4. Hadoop集羣中的最大數據節點數量是多少？
- 5. Hadoop：將slave設置爲explicit reducer？
- 6. 在reducer中設置Hadoop變量並在驅動中讀取
- 7. 自動設置每個節點的最大地圖任務數量爲核心數量？
- 8. 配置Hadoop爲每個密鑰使用不同的Reducer進程？
- 9. hadoop單節點設置
- 10. 每個節點的不同子元素的最大數量
- 11. 如何在Hadoop中的單個數據節點上設置單個數據節點目錄？
- 12. 如何在Hadoop中設置reducer輸出名稱？
- 13. XSL - 爲節點內的每個節點設置
- 14. 的Hadoop 2.6.1單節點設置：數據節點未啓動
- 15. Hadoop集羣中的節點數量
- 16. 最大流量 - 通過頂點 - 如何？
- 17. Hadoop的多節點集羣設置
- 18. 如何在hadoop中設置多主節點（2個主站和4個從站）？
- 19. 設置每個系統的數據節點，並從每個
- 20. 在C++中設置最大數量
- 21. 如何在Java中設置/爲父節點設置子節點，子節點的子節點等等？
- 22. 如何在自定義分區程序Hadoop中設置每個reducer的輸出文件號
- 23. 玻璃魚節點的最大數量？
- 24. 爲nouislider設置新值最大數量
- 25. HA中hadoop設置的3個日誌節點的要求
- 26. 設置最大數量
- 27. 查詢Hive中每個節點的子節點的數量
- 28. 設置3節點hadoop羣集
- 29. Hadoop單節點集羣設置問題
- 30. 在ubuntu 14.04 hadoop 2.6中運行hadoop程序單節點集羣設置hadoop 2.6