使用spark-submit 提交作业报错

Question

在清洗的作业里，使用 --files 

依然有FileNotFoundException  ......   spark-1.0-jar-with-dependencies.jar!/ipRegion.xlsx (No such file or directory)

试过很多次，--files两个文件的路径保证是正确的，使用的mvn assembly:assembly 打包的。

在IDEA上都完全可以完成任务 

Answer 1

Michael_PK 2017-11-28 16:40:16

这个操作一定要按照视频上讲的顺序来，你到ui页面上看看是否file生效没

• 提问者 WGray0 #1

  我用的 --master local[2] 报这样的错
  但是我用--master yarn 就可以了，省份也正确读出来了，
  两种方式有什么区别吗？

• Michael_PK 回复 提问者 WGray0 #2

  运行环境不同，有差别的