star4g 发表于 2014-7-2 17:17
版主你好，我想问一下，如果客户端kettle提交的请求是基于MR1的，服务端配置是YARN，提交到8032端口，会 ...

应该是这个问题，但是我不知道如何去修改配置让她两边的 提交请求是一致。

请问解决了吗

star4g 发表于 2014-7-5 16:17
不是sqoop2，是sqoop1.
也没用Cloudera Manager管理。
服务端用的CDH4.4版本。

没有连上看看端口、防火墙、主机名（hostname）、ip这些是基本的。一遍遍屡屡，说不定就是一个不起眼的小错误。

nettman 发表于 2014-7-4 01:02
用的是Cloudera Manager (CM) 管理的集群吗？如果是的话，你的配置需要改改。

是sqoop2吗？

不是sqoop2，是sqoop1.
也没用Cloudera Manager管理。
服务端用的CDH4.4版本。


现在好像是在终端连接 hadoop服务端没连接上，或者连接上被拒绝了的感觉。


想解决问题，但是没有方向没有头绪。


真心求帮助，不然经理要弄死我了。

star4g 发表于 2014-7-2 17:17
版主你好，我想问一下，如果客户端kettle提交的请求是基于MR1的，服务端配置是YARN，提交到8032端口，会 ...

用的是Cloudera Manager (CM) 管理的集群吗？如果是的话，你的配置需要改改。

是sqoop2吗？
改一下下面两个配置试一下。

org.apache.sqoop.connector.autoupgrade=true
org.apache.sqoop.framework.autoupgrade=true
复制代码

hyj 发表于 2014-6-28 06:54
检查下通信，hostname等，好像是连接不上。

版主你好，我想问一下，如果客户端kettle提交的请求是基于MR1的，服务端配置是YARN，提交到8032端口，会不会出现这样的情况？
感觉可能是这样的问题。
拜谢了！快被这问题逼疯了。

hyj 发表于 2014-6-28 06:54
检查下通信，hostname等，好像是连接不上。

测试过。通信啊什么的都没有问题的。

star4g 发表于 2014-6-28 01:48
应该不是语句的问题。
看了日志上是本地打好了jar包连接hadoop然后出错的。

检查下通信，hostname等，好像是连接不上。

howtodown 发表于 2014-6-27 23:05
SELECT * FROM TBLS WHERE 1 AND  (1 = 0)

你这个sql语句在看看是不是有问题

应该不是语句的问题。

--target-dir /user/impala/kettle/sqoop --split-by TBL_ID --query "SELECT * FROM TBLS WHERE 1 AND $CONDITIONS" --connect jdbc:mysql://192.168.128.51:3306/hive --driver com.mysql.jdbc.Driver --username hive --password hive --verbose --fields-terminated-by ~
复制代码

看了日志上是本地打好了jar包连接hadoop然后出错的。