分享

这个是什么情况 小菜鸟一个 望大神指点迷津

welcome 发表于 2017-11-27 09:52:16 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 4981
eclipse运行hadoop错误如下
ClassNotFoundException:org.apache.hadoop.io.nativeio.NativeIO$POSIX$Stat

2017-11-27 09:29:40,859 INFO  util.NativeCodeLoader (NativeCodeLoader.java:<clinit>(43)) - Loaded the native-hadoop library
2017-11-27 09:29:40,860 ERROR nativeio.NativeIO (NativeIO.java:<clinit>(95)) - Unable to initialize NativeIO libraries
java.lang.NoClassDefFoundError: org/apache/hadoop/io/nativeio/NativeIO$POSIX$Stat
    at org.apache.hadoop.io.nativeio.NativeIO.initNative(Native Method)
    at org.apache.hadoop.io.nativeio.NativeIO.<clinit>(NativeIO.java:89)
    at org.apache.hadoop.fs.FileUtil.setPermission(FileUtil.java:655)
    at org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:514)
    at org.apache.hadoop.fs.RawLocalFileSystem.mkdirs(RawLocalFileSystem.java:349)
    at org.apache.hadoop.fs.FilterFileSystem.mkdirs(FilterFileSystem.java:193)
    at org.apache.hadoop.mapreduce.JobSubmissionFiles.getStagingDir(JobSubmissionFiles.java:126)
    at org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:942)
    at org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:936)
    at java.security.AccessController.doPrivileged(Native Method)
    at javax.security.auth.Subject.doAs(Subject.java:422)
    at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1190)
    at org.apache.hadoop.mapred.JobClient.submitJobInternal(JobClient.java:936)
    at org.apache.hadoop.mapreduce.Job.submit(Job.java:550)
    at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:580)
    at org.apache.nutch.util.NutchJob.waitForCompletion(NutchJob.java:50)
    at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:233)
    at org.apache.nutch.crawl.InjectorJob.inject(InjectorJob.java:251)
    at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:273)
    at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)
    at org.apache.nutch.crawl.InjectorJob.main(InjectorJob.java:282)
Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.io.nativeio.NativeIO$POSIX$Stat

求个解决思路

已有(4)人评论

跳转到指定楼层
qcbb001 发表于 2017-11-27 10:14:48
是在本地运行的,还是远程。配置文件是否复制到开发环境中。
回复

使用道具 举报

welcome 发表于 2017-11-27 10:19:09
请问需要哪些 配置文件 我是远程连接
回复

使用道具 举报

welcome 发表于 2017-11-27 10:20:35
qcbb001 发表于 2017-11-27 10:14
是在本地运行的,还是远程。配置文件是否复制到开发环境中。

请问需要哪些 配置文件 我是远程连接
回复

使用道具 举报

qcbb001 发表于 2017-11-27 10:27:25
welcome 发表于 2017-11-27 10:20
请问需要哪些 配置文件 我是远程连接

代码贴出来看下。本地用的hadoop版本与远程的hadoop版本是否一致。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条