分享

sqoop 配置?hadoop配置问题?

场景:年前在这台机器上搭了三台机器,后来一直没用这套,今天重新拿起来用了一下sqoop,2月6号的时候都还运行成功过,
中间时间可能发生了某某事情
环境:hadoop2.6.4    sqoop-1.99.4
问题:
用sqoop从master机器上的mysql中导一张两条数据的表到hdfs上
结果报错如下
sqoop1111111.png
goole查了一些,都云说/etc/hosts  和hostname的名字不对,但是
/etc/hosts的结果都是
[mw_shl_code=applescript,true]192.168.52.137  master
192.168.52.136  slave2
192.168.52.128  slave1[/mw_shl_code]
然后hostname名字都对应,还有的说是防火墙没关,我确定也没启动,关了,server iptables status

他在这里找的是master.localdomain:8020  ,但是这个名字就是错的,应该找的是master:8020,为啥名字后面会有localdomain
谁知道这个配置在哪改么?
server/conf下面的几个配置文件都看了,没看见这个,遇见问题了我不想把sqoop卸载了重装,虽说这样很方便,who can help me!!!


已有(9)人评论

跳转到指定楼层
2017 发表于 2017-4-12 18:34:30
hosts应该有localhost呀,怎么没有见到。
楼主上图看下
回复

使用道具 举报

2017 发表于 2017-4-12 18:36:20
除了hosts,network也看下。里面可能有问题。

/etc/sysconfig/network




回复

使用道具 举报

SuperDove 发表于 2017-4-12 18:38:06
2017 发表于 2017-4-12 18:34
hosts应该有localhost呀,怎么没有见到。
楼主上图看下

你说的是::127.0.0.1对吧,这个我之前就没有是没有毛病的
回复

使用道具 举报

SuperDove 发表于 2017-4-12 18:45:59
2017 发表于 2017-4-12 18:36
除了hosts,network也看下。里面可能有问题。

/etc/sysconfig/network

之前是这样的:
[mw_shl_code=applescript,true][zcy@master ~]$ cat /etc/sysconfig/network
# Created by anaconda
NETWORKING=yes[/mw_shl_code]
后来我加了几行
[mw_shl_code=applescript,true][zcy@master ~]$ cat /etc/sysconfig/network
# Created by anaconda
NETWORKING=yes
NETWORKING_IPV6=no  
HOSTNAME=master  [/mw_shl_code]
两个我都试了
/etc/hosts如下
[mw_shl_code=applescript,true][zcy@master ~]$ cat /etc/hosts
192.168.52.137  master
192.168.52.136  slave2
192.168.52.128  slave1[/mw_shl_code]
hdfs启动之后master:50070上是看的见集群的信息的
回复

使用道具 举报

2017 发表于 2017-4-12 19:02:53
SuperDove 发表于 2017-4-12 18:45
之前是这样的:
[mw_shl_code=applescript,true][zcy@master ~]$ cat /etc/sysconfig/network
# Creat ...

以前可能没有生效。localhost是必须的,楼主加上后重启下。如果多个节点应该都加上。
  1. 127.0.0.1        localhost.localdomain localhost
复制代码

回复

使用道具 举报

SuperDove 发表于 2017-4-13 18:39:05
2017 发表于 2017-4-12 19:02
以前可能没有生效。localhost是必须的,楼主加上后重启下。如果多个节点应该都加上。

以前也是生效了的,就算加了127.0.0.1        localhost.localdomain localhost
也是养
之前我是跑成功了的,试了还是不行
回复

使用道具 举报

tanxl 发表于 2017-4-14 09:55:12
你看一下 hadoop   /etc/hadoop/core-site.xml 文件里面的配置是否有问题
回复

使用道具 举报

SuperDove 发表于 2017-4-14 10:16:29
tanxl 发表于 2017-4-14 09:55
你看一下 hadoop   /etc/hadoop/core-site.xml 文件里面的配置是否有问题

sqoop error.png
看了看,发现没毛病啊
回复

使用道具 举报

tanxl 发表于 2017-4-14 11:02:54
你自己对比一下把不同的相应改一下看看能行不?
我的端口是9000 你的是8020,你的是什么系统,Ubuntu?
QQ图片20170414103414.png
QQ图片20170414110103.png
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条