開始的下載 IDEA撵幽,然后安裝 scala
插件财破,新建 sbt 項目的步驟我就略過了,重點說說引入 spark
的方法。
首先打開 build.sbt 文件蝶缀,然后在文件中加入下面兩行內(nèi)容
libraryDependencies += "org.apache.spark" %% "spark-core" % "2.3.0"
libraryDependencies += "org.apache.spark" %% "spark-graphx" % "2.3.0"
多虧了 sbt,我們在引入第三方類庫的時候一點難度也沒有薄货。不過有個需要注意的地方: spark-core
和 spark-graphx
的版本需要和 scala
的 SDK 對應(yīng)翁都。我當時下的 SDK 是 2.12.x,然后下載 spark-*
的時候報找不到依賴項的錯谅猾,最后在對比了 maven 上的版本才發(fā)現(xiàn)自己版本用高了柄慰。重新下個 2.11.x 的 SDK 就好了。