分享

Hadoop 2.4.1 设置问题总结

hyj 2014-8-3 22:56:15 发表于 总结型 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 8382
问题导读:
1.找不到winutils.exe的可能解决方案是什么?
2. 遇到连接上hdfs服务器后,可读取不能写操作问题,有几种解决方法?





1.服务器禁用ipV6配置


2.找不到winutils.exe

系统变量设置了HADOOP_HOME也不行,程序中直接设定环境变量,还能省去系统配置,更方便
System.setProperty("hadoop.home.dir","xxxxxxxxx");
这里可能的原因是没有包不够:包可以到


hadoop家族、strom、spark、Linux、flume等jar包、安装包汇总下载(持续更新)
http://www.aboutyun.com/thread-8178-1-1.html






3.连接不上服务器的hdfs端口
查看/etc/hosts中,主机名是否没绑定127.0.0.1或127.0.1.1,ubuntu中这是主要原因,hosts中主机名要绑定外网IP slaves中去掉localhost,只有一台机器的话,否则加上其它服务器,/etc/hosts中绑定其它服务器的主机名和对应的外网IP

4.连接上hdfs服务器后,可读取不能写操作,这是因为默认是用当前用户名去通信的,改当前用户名?麻烦,直接一行代码搞定!
System.setProperty("HADOOP_USER_NAME","xxxxxxxx");



已有(1)人评论

跳转到指定楼层
wordwan@163.com 发表于 2014-8-5 09:49:31
解决了很多的疑惑
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条