MapReduce的执行

Question

MapReduce的执行 需要执行名Hadoop jar xxx执行，那么如果做离线统计，是需要借助shell开启一个定时任务去执行？这里不大懂，如果shell所在的节点挂了咋整？

Answer 1

Michael_PK 2020-05-02 19:12:19

使用shell去封装提交脚本就行了。你既然用shell了，shell肯定在你的机器上，你要是就一个机器，那还是咋办，肯定没法提交。生产上都是有高可用的调度框架来进行shell的调度。都是高可用的

• 提问者 hahe #1

  老师，再问下，除了shell这种方法来提交脚本，还有其他方式吗？因为考虑到还需要维护shell的高可用。

• Michael_PK 回复 提问者 hahe #2

  那就看你们的调度平台支持的如何。友好的都是UI上配置你的入口类和参数就行了，其他都是调度平台帮你封装了。

• 提问者 hahe #3

  非常感谢！