请稍等 ...
×

采纳答案成功!

向帮助你的同学说点啥吧!感谢那些助人为乐的人

hive的driver是不是和spark的driver一样,可能会内存溢出?

hive的driver是不是和spark的driver一样,可能会内存溢出?

正在回答 回答被采纳积分+3

1回答

Michael_PK 2021-05-22 22:53:52

概念不太一样。hive终端的溢出可能性肯定是资源不够了。但是如果使用hiveserver2,那是有可能溢出的,可以将hiveserver2启动时调大内存

0 回复 有任何疑惑可以回复我~
  • 提问者 程研板 #1
    这里的概念不一样是什么意思呢?😱😱
    回复 有任何疑惑可以回复我~ 2021-05-23 00:11:45
  • Michael_PK 回复 提问者 程研板 #2
    hive就是把sql提交到集群上去运行而已,运行完了就是把结果写到表里去了呢。
    spark driver里面是包含main方法,以及要和executor进行通信的
    回复 有任何疑惑可以回复我~ 2021-05-23 23:17:03
  • 提问者 程研板 回复 Michael_PK #3
    懂了,hive的driver只是个sql工具,真正的执行还是在yarn中的applicationMaster,而spark的driver是直接运行程序的地方
    回复 有任何疑惑可以回复我~ 2021-05-24 10:46:50
问题已解决,确定采纳
还有疑问,暂不采纳
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号