采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
在使用ide开发那里,老师是用本地的spark环境运行的,前面的课程好像没有说这里的本地环境是怎么配置的。
这个地方老师或者同学能解释一下吗? 看老师视频好像是在本机也安了一个spark? 那我本地能不能直接把服务器上的spark文件复制下来直接跟着使用?
idea开发,本地不需要安装spark,只要把相关的依赖加进来自动就可以使用的。
这是pyspark,不是java的项目,没有maven可配呀。
py项目,只要把spark那个路径配置上就行了
IDE是在本地的,不需要本地配置spark环境,只要maven里面加spark依赖就行了
登录后可查看更多问答,登录/注册
使用Python3对Spark应用程序进行开发调优,掌握Azkaban任务调度
1.3k 16
1.1k 15
1.1k 14
1.1k 12
2.4k 11