2016-01-20 84 views

回答

1

其實你可以使用Spark Web UI來看看哪些可以在http://your-master-node:4040找到環境變量,並提供您已經設置您的spark.driver.maxresultsize變量屬性文件(火花-defaults.conf)。

位於http://:4040的應用程序Web UI列出了「環境」選項卡中的Spark屬性。這是檢查以確保您的屬性設置正確的有用地點。請注意,只有通過spark-defaults.conf,SparkConf或命令行顯式指定的值纔會出現。對於所有其他配置屬性,可以假定使用默認值。

相關問題