开始的下载 IDEA,然后安装 scala
插件,新建 sbt 项目的步骤我就略过了,重点说说引入 spark
的方法。
首先打开 build.sbt 文件,然后在文件中加入下面两行内容
libraryDependencies += "org.apache.spark" %% "spark-core" % "2.3.0"
libraryDependencies += "org.apache.spark" %% "spark-graphx" % "2.3.0"
多亏了 sbt,我们在引入第三方类库的时候一点难度也没有。不过有个需要注意的地方: spark-core
和 spark-graphx
的版本需要和 scala
的 SDK 对应。我当时下的 SDK 是 2.12.x,然后下载 spark-*
的时候报找不到依赖项的错,最后在对比了 maven 上的版本才发现自己版本用高了。重新下个 2.11.x 的 SDK 就好了。