采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
hive的driver是不是和spark的driver一样,可能会内存溢出?
概念不太一样。hive终端的溢出可能性肯定是资源不够了。但是如果使用hiveserver2,那是有可能溢出的,可以将hiveserver2启动时调大内存
这里的概念不一样是什么意思呢?😱😱
hive就是把sql提交到集群上去运行而已,运行完了就是把结果写到表里去了呢。 spark driver里面是包含main方法,以及要和executor进行通信的
懂了,hive的driver只是个sql工具,真正的执行还是在yarn中的applicationMaster,而spark的driver是直接运行程序的地方
登录后可查看更多问答,登录/注册
从Hadoop核心技术入手,掌握数据处理中ETL应用,轻松进军大数据
1.6k 21
2.0k 20
1.8k 19
2.0k 17
3.9k 16
购课补贴联系客服咨询优惠详情
慕课网APP您的移动学习伙伴
扫描二维码关注慕课网微信公众号