关于Spark运行模式：YARN

Question

视频中提到Spark可以只有一个客户端节点，却可以让Hadoop集群去计算？不需要每个节点都有Spark的运行环境吗？

Answer 1

Michael_PK 2021-12-16 15:59:29

spark on yarn模式，不需要安装spark集群，因为spark就是个提交的客户端而已，提交有的作业直接是运行在yarn上的，不管yarn是几个节点，统一通过yarn的资源分配来进行运行spark作业