在ec2上手動配置hadoop

有人可以請我指點任何資源，幫助我手動在EC2上設置/配置Hadoop（1.0.4）。我同意有很多資源可以使用工具，服務等來完成這項工作，但是我正在尋找的是一些幫助，可以幫助您找出手動對slave和master的conf/*。xml文件所做的修改爲了獲得Hadoop的工作。在ec2上手動配置hadoop

現在，我有5個ec2實例正在運行，並且它們都能夠以僞隨機分佈模式單獨運行hadoop作業。所以，我需要通過配置conf文件來將其中一個變成master，其餘的變成slave，這樣slave就知道namenode和jobtracker在哪裏，master知道所有的slave。

我的理解是，我還必須配置實例的EC2安全組，以便它們可以在正確的端口上彼此通信。我想我可以這樣做。

任何人都可以幫我配置部分，或指向我可能有幫助嗎？

來源

2013-04-10 RTF

僅供參考.....的[自動化]（http://www.thecloudavenue.com/2013/04/setting-up -cdh-cluster-on-amazon-ec2-in.html）方式。 – 2013-04-11 03:02:12

我發現這裏這徹底的教程，讓我起來，並最終運行：http://cloudblog.8kmiles.com/2011/12/05/hadoop-fully-distributed-setup/

來源

2013-04-10 21:51:41 RTF

嘿，我有一個問題，因爲我也試圖讓ecado2上運行的hadoop 1.0.4，你有一個時刻？ – 2013-04-26 21:57:40

即時通訊設法找到一個hadoop 1.0.4圖像：ec2-describe-images -x all | grep 1.0.4 – 2013-04-26 22:00:27

在ec2上手動配置hadoop

回答

相關問題