presto与spark sql的关系

Question

现在presto，impala等查询引擎可直接访问hdfs，而不用经过rdd，原因是impala这种查询引擎，自带了类似于spark core的计算引擎吗？就是impala与spark sql➕spark core这两个东西合起来是并列关系吗？

Answer 1

Michael_PK 2021-04-05 22:05:27

Presto、Impala、SparkSQL都是属于SQL on Hadoop的解决方案。

这些框架都是有对应的元数据管理部分，也就是说都具备schema信息的，只要schema与文件系统上的数据对应上，那都有各自的引擎来进行分析的。

• 提问者 程研板 #1

  懂了，谢谢pk哥，还想冒昧的问下，pk哥接下来会出什么课啊，有点期待。

• Michael_PK 回复 提问者 程研板 #2

  哈哈哈 感谢支持，一个月内就有新课，先不暴露，哈哈哈

• 提问者 程研板 回复 Michael_PK #3

  呜呜呜，pk哥的新课呢？😂😂

点开查看后面1条评论