请稍等 ...

提交统计作业到YARN上报错

本地local模式没报错呢,但是提交统计作业到YARN上报错,请老师和各位大虾帮忙看看

火力全开dung 2018-07-05 07:30:08

源自：9-26 -统计作业运行在YARN上

689

收起

提交取消

1回答

Michael_PK 2018-07-05 11:12:04

你这个里面有数据类型转换不对，估计你用的不是一份数据吧？

0 回复有任何疑惑可以回复我~

提问者火力全开dung #1

清洗日志写入的Schema打印出的day是string 读出来就成Integer了,所以报转化错误,我也不知道怎么从string "自己"变成Integer的~??

回复有任何疑惑可以回复我~ 2018-07-05 22:17:51

Michael_PK 回复提问者火力全开dung #2
```
day是不是分区字段?估计他自己推测了
```
回复有任何疑惑可以回复我~ 2018-07-05 22:52:40
提问者火力全开dung #3
```
是的呢，你也是??，咋没报错呢？
```
回复有任何疑惑可以回复我~ 2018-07-05 23:39:40

点开查看后面1条评论

相似问题

请问老师，这个技术架构为啥没有用到yarn呢？mr作业不是说要提交到yarn上运行吗？

问个菜鸟的问题，就是spark计算逻辑的过程是在spark这端跑的还是提交作业在yarn上面跑的？

在YARN上提交打包的作业之后，提示已杀死，这是为什么呢？

spark提交作业到yarn上报错classnotfound

关于提交作业到Spark on yarn cluster时，出现如下问题？？？

登录后可查看更多问答，登录/注册

以慕课网日志分析为例进入大数据Spark SQL的世界

参与学习 1644 人
解答问题 1129 个

快速转型大数据：Hadoop，Hive，SparkSQL步步为赢

了解课程

本课精华内容

问答

datanode 启动失败

1.6k 6

Spark编译很不顺利

1.8k 6

meaven依赖包下载的慢的看看这个

1.9k 1

spark 编译失败

1.2k 21

spark无法开始编译，我的错误总是那么新颖

1.5k 18

查看更多本课问答

意见反馈帮助中心 APP下载