分享

eclipse 运行hadoop出现问题?

fanbells 发表于 2014-4-25 17:53:00 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 3 8160
本帖最后由 nettman 于 2014-5-27 03:31 编辑
在eclipse中使用插件运行wordcount列子,出现

WARN mapred.JobClient:No job jar file set. User classes may not be found. See JobConf(Class) orJobConf#setJar(String)
INFOnput.FileInputFormat: Total input paths to process :
WARNutil.NativeCodeLoader: Unable to load native-hadoop library for yourplatform... using builtin-java classes where applicable
WARN snappy.LoadSnappy:Snappy native library not loaded
INFO mapred.JobClient:Running job: job_201404221445_0021
INFO mapred.JobClient:map 0% reduce 0%
INFO mapred.JobClient:Task Id : attempt_201404221445_0021_m_000000_0, Status : FAILED               
java.lang.RuntimeException:java.lang.ClassNotFoundException: com.test.Test$TokenizerMapper               
at org.apache.hadoop.conf.Configuration.getClass(Configuration.java:857)               
atorg.apache.hadoop.mapreduce.JobContext.getMapperClass(JobContext.java:199)               
atorg.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:718)               
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:364)               
atorg.apache.hadoop.mapred.Child$4.run(Child.java:255)               
atjava.security.AccessController.doPrivileged(Native Method)               
atjavax.security.auth.Subject.doAs(Subject.java:396)               
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1190)               
atorg.apache.hadoop.mapred.Child.main(Child.java:249)               
Caused by:java.lang.ClassNotFoundException: com.yq.test.Test$TokenizerMapper               
at java.net.URLClassLoader$1.run(URLClassLoader.java:202)               
atjava.security.AccessController.doPrivileged(Native Method)               
atjava.net.URLClassLoader.findClass(URLClassLoader.java:190)               
atjava.lang.ClassLoader.loadClass(ClassLoader.java:306)               
atsun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:301)               
atjava.lang.ClassLoader.loadClass(ClassLoader.java:247)               
at java.lang.Class.forName0(Native Method)               
at java.lang.Class.forName(Class.java:249)               
atorg.apache.hadoop.conf.Configuration.getClassByName(Configuration.java:810)               
atorg.apache.hadoop.conf.Configuration.getClass(Configuration.java:855)               
... 8 more   



查看了一些帖子都没有效果,问一下这个是什么原因导致的?


已有(3)人评论

跳转到指定楼层
pig2 发表于 2014-4-25 18:17:25
好像错误不是一处,本地库问题,代码输入出格式,等也检查一下。
回复

使用道具 举报

sstutu 发表于 2014-5-20 15:22:28
pig2 发表于 2014-4-25 18:17
好像错误不是一处,本地库问题,代码输入出格式,等也检查一下。

class not found ,应该找不到类。
回复

使用道具 举报

nettman 发表于 2014-6-25 19:40:04
看看本地库是否一致

解决Hadoop-2.2.0官方发行版本32位lib不能加载的问题
http://www.aboutyun.com/thread-8238-1-1.html
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条