通過Zeppelin運行Spark，附加參數

Question

我用Zeppelin來啓動Spark，並附加了一些參數（--total-executor-cores 200 --executor-memory 20g --driver-memory 5g）我試圖將這些參數添加到通過Zeppelin UI進行火花翻譯。我點擊編輯按鈕並添加這三個參數，但是當我點擊保存時他們消失了，我可以看到我的Spark是由Zeppelin開始的，沒有這些參數。

你能給我一個提示，我該如何讓Zeppelin用其他參數啓動Spark？

Answer 1

看看（或conf/zeppelin-env.sh.template）。在該文件的「Spark解釋器配置」部分中的註釋中：

# export SPARK_SUBMIT_OPTIONS     # (optional) extra options to pass to spark submit. eg) "--driver-memory 512M --executor-memory 1G".