2
我啓動了hadoop集羣並向主設備提交了一個作業。 jar文件只包含在主文件中。在開始工作時,hadoop是否將罐子運送到所有的奴隸機器上?是否有可能在最後一次運行期間使用之前版本的代碼運行從機?Hadoop:從主設備發送到從設備的代碼
謝謝
巴拉
我啓動了hadoop集羣並向主設備提交了一個作業。 jar文件只包含在主文件中。在開始工作時,hadoop是否將罐子運送到所有的奴隸機器上?是否有可能在最後一次運行期間使用之前版本的代碼運行從機?Hadoop:從主設備發送到從設備的代碼
謝謝
巴拉
從MapReduce的教程:
框架將作業任何 任務上 執行前的必要 文件複製到從節點節點。其效率源於 這一事實:文件爲,僅複製 每個作業一次,並且緩存 存檔的能力在 奴隸上未被存檔。
此處瞭解詳情:
http://hadoop.apache.org/common/docs/current/mapred_tutorial.html