当前位置: 首页 > 知识库问答 >
问题:

无法运行hadoop wordcount示例?

华化
2023-03-14

我正在VMware中Ubuntu12.04的单节点环境中运行hadoop wordcount示例。我运行的示例是这样的:--

hadoop@master:~/hadoop$ hadoop jar hadoop-examples-1.0.4.jar wordcount    
/home/hadoop/gutenberg/ /home/hadoop/gutenberg-output
/home/hadoop/gutenberg
    /home/hadoop/gutenberg-output

当我运行wordcount程序时,我得到以下错误:--

 13/04/18 06:02:10 INFO mapred.JobClient: Cleaning up the staging area     
hdfs://localhost:54310/home/hadoop/tmp/mapred/staging/hadoop/.staging/job_201304180554_0001       
13/04/18 06:02:10 ERROR security.UserGroupInformation: PriviledgedActionException       
as:hadoop cause:org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory 
/home/hadoop/gutenberg-output already exists 
org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory 
/home/hadoop/gutenberg-output already exists at 

org.apache.hadoop.mapreduce.lib.output.FileOutputFormat.checkOutputSpecs(FileOutputFormat.j 
ava:137) at org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:887) at 
org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:850) at 
java.security.AccessController.doPrivileged(Native Method) at 
javax.security.auth.Subject.doAs(Subject.java:416) at 
org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1121) at   
org.apache.hadoop.mapred.JobClient.submitJobInternal(JobClient.java:850) at  
org.apache.hadoop.mapreduce.Job.submit(Job.java:500) at  
org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:530) at 
org.apache.hadoop.examples.WordCount.main(WordCount.java:67) at 
sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at 
sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57) at 
sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) 
at java.lang.reflect.Method.invoke(Method.java:616) at 
org.apache.hadoop.util.ProgramDriver$ProgramDescription.invoke(ProgramDriver.java:68) 
at org.apache.hadoop.util.ProgramDriver.driver(ProgramDriver.java:139) at 
org.apache.hadoop.examples.ExampleDriver.main(ExampleDriver.java:64) at 
sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at 
sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57) at 
sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) 
at java.lang.reflect.Method.invoke(Method.java:616) at   
org.apache.hadoop.util.RunJar.main(RunJar.java:156) hadoop@master:~/hadoop$ bin/stop-
all.sh Warning: $HADOOP_HOME is deprecated. stopping jobtracker localhost: stopping   
tasktracker stopping namenode localhost: stopping datanode localhost: stopping 
secondarynamenode    hadoop@master:~/hadoop$

共有1个答案

蒙胤
2023-03-14

删除已存在的输出文件,或输出到其他文件。

(我有点好奇您考虑的错误消息的其他解释。)

 类似资料:
  • 我在我的系统上安装了AlchemyApi,也获得了Api密钥。但是当我运行readme.txt文件中提到的示例时,我得到以下错误:- alchemyapi_java-0.8/testdir$java-jar../dist/alchemyapi-entity-test.jar

  • 我已经下载了活动5.10 zip文件,然后我下载并配置了Apache ANT,我测试了一下,它成功了。但是我无法运行此链接中指定的演示文件http://activiti.org/userguide/#demo.setup 如果我使用cmd命令行键入以下命令:- 我将得到以下错误:- 有人能帮我找出问题所在吗?溴 ::: UPDATE::: 感谢您的回复,我已经将ANT bin文件复制到活动的安装目

  • 问题内容: 在Java上使用Selenium时遇到问题。我正在尝试遵循此页面上的示例:http : //code.google.com/p/selenium/wiki/GettingStarted 我输入这个: 得到这个: 我将示例中的代码粘贴到Example.java中。 更新 irc.freenode.net上#java上的一个好心人告诉我将我的条目链接到类路径中。因此,代替: 我用了: 大!

  • 全部的 我在windows PC上脱机运行JProfiler7示例时遇到一个错误,代码来自“JProfiler7\api\samples\offline\src\TestProgram.java”,并得到如下消息: JProfiler公司 JProfiler公司 JProfiler公司 JProfiler公司 我确信没有任何JProfiler进程正在运行,我已经通过“agent.jar”导入了引用

  • 我能够验证输入目录(在/tmp下)是否存在新闻组数据。不确定为什么我得到一个文件未找到异常。 $sh classify-20newsgroups.sh请选择一个数字以选择要运行的相应任务1。奈韦贝耶斯2。新元3。clean--在/tmp/mahout-work-rsrinivasan中清理工作区域,输入您的选择:1 OK。您选择了1,我们将使用naivebayes在/tmp/mahout-work

  • 我已经设置了我的第一个spark集群(1个master,2个Worker)和一个iPython笔记本服务器,我已经设置了它来访问该集群。我正在运行Anaconda的工人,以确保每个盒子上的python设置都是正确的。iPy笔记本服务器似乎已经正确设置了所有内容,并且我能够初始化Spark并推出一个作业。然而,这项工作正在失败,我不确定如何排除故障。代码如下: 这里有个错误: Py4JJavaErr