我也是和你一样的问题,刚刚才解决了,就是我之前只关了一个namenode的防火墙。可以用浏览器正常访问hadoop,正常显示文件传输,无任何报错,但是就是没有内容。直到我将namenode和DataNode所有防火墙都关掉后,文件可以成功上传了。 |
今天尝试换一种网络环境,远程上传文件成功。 下面对此次情况做个说明。也算对这个问题做个了结,给其他人提供点思路吧。 ++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++ ++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++ 使用VMware12环境安装两台 Centos6.5。分别作为 master + slaver1 宿主机使用 Windows 10 下使用 Eclipse-kepler版本的 JavaEE 插件使用的是:hadoop-eclipse-kepler-plugin-2.2.0.jar Hadoop版本: [root@master hadoop]# hadoop version Hadoop 2.7.0 Subversion Unknown -r Unknown Compiled by root on 2015-11-06T08:50Z Compiled with protoc 2.5.0 From source with checksum a9e90912c37a35c3195d23951fd18f This command was run using /opt/hadoop_resources/hadoop-2.7.0/share/hadoop/common/hadoop-common-2.7.0.jar ======================================= 网络采用桥接物理机网络。为的是模拟hadoop 集群网段跟开发机网段以至。 主机 IP master(root) 192.168.100.16 slaver1(root) 192.168.100.17 Windows 10 (Kevin) 192.168.100.5 ======================================== 在 Eclipse 中点击上传文件,没有出现卡顿。文件上传成功,文件内容没有丢失。 查看 hadoop-root-namenode-master.log 无错误输出,无警告输出。 ======================================== 通过 Eclipse 做单词统计案例,问题。 统计结果正常。。。。 ============== 最后,对于,之前GRE网络模式下的开发。后面在尝试,如果有好消息,会再来跟大家说的。 -------------------- 最后的最后,感谢大家来帮忙。 |
Kevin517 发表于 2016-10-16 15:25 插件有时候不稳定,你通过命令上传即可。(通过插件根本没有上传成功。) 然后运行下试试。 插件并不是开发的重点。 有两种开发方式,不要局限于插件 hadoop开发方式总结及操作指导 http://www.aboutyun.com/forum.php?mod=viewthread&tid=6950 |
Kevin517 发表于 2016-10-16 15:25 window下eclipse开发hadoop需要添加的组件: 推荐参考 零基础学习hadoop到上手工作线路指导(编程篇) http://www.aboutyun.com/forum.php?mod=viewthread&tid=8329 |
Kevin517 发表于 2016-10-16 10:15 不需要重装的。 楼主可以尝试通过命令上传一个文件,然后查看下文件内容 |
qcbb001 发表于 2016-10-16 10:00 哦哦,那我再重新来一次看看吧。如果有好消息,回来告诉大家 |
本帖最后由 qcbb001 于 2016-10-16 10:14 编辑 Kevin517 发表于 2016-10-16 08:38 应该是easthome001所说, 第二次出现的还是这个问题。 很可能有的datanode挂掉了 |
arsenduan 发表于 2016-10-15 21:08 我把 input/ 目录授予 777 权限上传还是一样问题。 |