老师，您好，提交wordCount作业的时候报错，我想让您帮我看看该如何解决

Question

[hadoop@hadoop001 bin]$ hadoop jar /home/hadoop/app/hadoop-2.6.0-cdh5.7.0/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0-cdh5.7.0.jar wordcount /input/wc/hello.txt /output/wc/
/home/hadoop/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop/hadoop-env.sh: line 2: or: command not found
19/03/19 23:35:04 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable
19/03/19 23:35:05 INFO client.RMProxy: Connecting to ResourceManager at /0.0.0.0:8032
19/03/19 23:35:05 WARN security.UserGroupInformation: PriviledgedActionException as:hadoop (auth:SIMPLE) cause:org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory hdfs://hadoop001:8020/output/wc already exists
org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory hdfs://hadoop001:8020/output/wc already exists
at org.apache.hadoop.mapreduce.lib.output.FileOutputFormat.checkOutputSpecs(FileOutputFormat.java:146)
at org.apache.hadoop.mapreduce.JobSubmitter.checkSpecs(JobSubmitter.java:270)
at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:143)
at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1307)
at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1304)

Answer 1

Michael_PK 2019-03-20 14:34:41

你现在的yarn能提交作业正常运行吗？提交一个自带的wordcount试试。

InvalidAuxServiceException: The auxService:mapreduce_shuffle does not exist

看这错，像是yarn的配置有问题

• 提问者 陈素素 #1

  老师，作业像是可以提交的上，那个好像就是配置文件的问题，这个我应该怎么去修改配置呢？

• 提问者 陈素素 #2

  /home/hadoop/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop/hadoop-env.sh: line 2: or: command not found
  这个应该是错误的根本原因

• Michael_PK 回复 提问者 陈素素 #3

  这是啥操作引起的呢？描述好上下文。。。

Answer 2

提问者 陈素素 2019-03-20 14:54:15

像是提交上了，但是就感觉是配置有问题。我该如何修改呢？

• Michael_PK #1

  你的输出目录已经存在了。。先删了目标目录再跑

• 提问者 陈素素 回复 Michael_PK #2

  删除了又跑了一遍，还是报错。
  /home/hadoop/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop/hadoop-env.sh: line 2: or: command not found

• Michael_PK 回复 提问者 陈素素 #3

  你这环境都有问题。仔细看环境搭建章节，把环境搞定先

点开查看后面1条评论