请稍等 ...
×

采纳答案成功!

向帮助你的同学说点啥吧!感谢那些助人为乐的人

请问老师在k8s上搭建hadoop集群合理吗?

今天用k8s搭建了一个spark集群,成功后于是想搭建一个hadoop集群,但是想到老师说的移动计算,以往正常的spark 的worker和hdfs的data node都在一个节点上且ip相同,当时用k8s的时候每个pod的ip都不一样,那么spark就不知道data node和worker是否在同一节点上,这样就无法做到准确移动计算,我这样理解对吗老师?

正在回答 回答被采纳积分+3

1回答

Michael_PK 2021-11-08 15:43:15

这个我真没操作过。

我们生产上也没采用这种方式,我们做了impala和presto等的容器化,大数据基础组件我们不做容器化

0 回复 有任何疑惑可以回复我~
问题已解决,确定采纳
还有疑问,暂不采纳
意见反馈 帮助中心 APP下载
官方微信