在大数据的道路上,spark是一个不错的选择,spark是使用scala开发的,对于scala相关程序的包依赖问题,推荐使用sbt(使用sbt先要解决sbt速度慢的问题:解决方案)
对于sbt写对应的spark程序,在开发的过程中没有任何问题,但是一旦提交,会显示找不到对应的类(ClasssNotFoundException)
解决方案:
这也许是IDEA的bug,File-> Settings -> Build, Execution, Deployment ->Build Tools ->sbt勾选 sbtuse sbt shell for build and import就能解决问题。