在Eclipse中的Spark項目的Maven設置Scala IDE

Question

使用Eclipse進行Scala IDE開發Spark應用程序。 進出口使用Maven項目，但是當我嘗試進口sparkcon，如：

import org.apache.spark.SparkConf 

我有錯誤：

對象Apache不包組織的成員，你可以幫我設置 火花依賴

Answer 1

您需要將Spark依賴項放在您的pom.xml文件中。截至目前，Spark的最新版本可以通過以下方式獲得：

<dependency> 
    <groupId>org.apache.spark</groupId> 
    <artifactId>spark-core_2.10</artifactId> 
    <version>2.2.0</version> 
</dependency> 

在您的pom.xml的依賴關係中。

Answer 2

，請以

https://sparktutorials.github.io/2015/04/02/setting-up-a-spark-project-with-maven.html

在線教程教程

https://www.youtube.com/watch?v=4sO-VgqHLp4