spark-shell中执行sparkSQL报错：需要Hive支持

Question

spark-shell启动正常
spark-shell执行spark.sql(“show tables”).show正常

执行spark.sql(“create table t(key string, value string)”)报错

说是需要hive支持，我将hive-site.xml放入$SPARK_HOME/conf下依然不管用，我也启动了元数据共享nohup hive --service metastore &依然不行

Answer 1

Michael_PK 2020-10-09 14:29:13

你是在服务器执行的是吧。两个事情，一是hivesite要在conf目录下，而是你如果使用了metastore服务，这个服务要正常启动起来，jps可以确认下是否启动成功。这两个的前提都是hivesite要在sparkconf下

• 提问者 璀璨年华_ #1

  是我的问题，我使用的是官网编译好的spark，它默认不支持hive，需要自己编译一个就可以了，麻烦老师了

• Michael_PK 回复 提问者 璀璨年华_ #2

  对的，是需要编译加入yarn的支持才可以