spark本地编译失败

Question

在执行到Building Spark Project YARN Shuffle Service 这一步失败，出现了很多编译错误类似：错误: 程序包org.apache.hadoop.yarn.api.records不存在

scala版本2.12.3，hadoop是 2.6.0-cdh5.12.0, spark 2.1.0

没思路，看似是版本不兼容引起编译错误？

请问实战提供的基于cdh5.7的spark包能否用在我的cdh5.12上？ 

Answer 1

Michael_PK 2017-10-12 12:12:50

spark环境编译在spark课程中有详细的讲解，你也可以参考下我的一个手记，描述了编译过程

• 提问者 apodemakeles #1

  问之前已经参考了，不行，我干脆改成cdh7