分享

sqoop导数据

shenqianwen 发表于 2015-11-10 11:41:09
kevin 发表于 2015-11-10 11:10
看不到你的sqoop语句啊,前段时间我也研究过sqoop,如果sqoop语句中没有指定hive表,直接往hdfs导数据,hiv ...

兄弟,指定hive表,那你的意思是,hive中要建表,表字段和导进来的数据表字段一致,还是要在hive中要建一个空表,还是不需要在hive中建表,只要还sqoop语句中随机写一个表名?
回复

使用道具 举报

shenqianwen 发表于 2015-11-10 11:42:01
kevin 发表于 2015-11-10 11:10
看不到你的sqoop语句啊,前段时间我也研究过sqoop,如果sqoop语句中没有指定hive表,直接往hdfs导数据,hiv ...

兄弟,指定hive表,那你的意思是,hive中要建表,表字段和导进来的数据表字段一致,还是要在hive中要建一个空表,还是不需要在hive中建表,只要还sqoop语句中随机写一个表名?
回复

使用道具 举报

kevin 发表于 2015-11-11 10:43:56
shenqianwen 发表于 2015-11-10 11:42
兄弟,指定hive表,那你的意思是,hive中要建表,表字段和导进来的数据表字段一致,还是要在hive中要建一 ...

全量导表时只需要指定表名,在导表的时候会先将表结构复制过来建立表的,导表过的过程中你会看到hdfs下存在相应的文件夹,导表完成之后文件夹消失,如果失败了,那么hdfs下就可能存在这个文件
回复

使用道具 举报

shenqianwen 发表于 2015-11-11 15:14:38
kevin 发表于 2015-11-11 10:43
全量导表时只需要指定表名,在导表的时候会先将表结构复制过来建立表的,导表过的过程中你会看到hdfs下存 ...

恩恩    hdfs里存在文件夹的,可以保存到hdfs,就是在hdfs uploadhive的过程中出了开始的错误。。。。。。不知道怎么解决,百度了好多。。。。  兄弟  求个联系方式,我实在搞不定了。。。。。。

回复

使用道具 举报

12
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条