搜索
搜 索
本版
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
交流区
›
技术交流
›
Sqoop
›
mysql导入hive问题
0
2
0
分享
mysql导入hive问题
evababy
发表于 2015-5-8 12:57:39
[显示全部楼层]
阅读模式
关闭右栏
2
14494
sqoop import --connect jdbc:mysql://master:3306/hiveDB --table sqooptest --username hive --password hive --hive-import --hive-overwrite --hive-database hiveDB --hive-table sqooptest --m 1每次导入成功后在HDFS生成一个文件,hdfs://master:9000/user/root/sqooptest,下次导入时提示此文件已经存在,这个文件并不是hive的数据文件。
hive存储位置: hdfs://master:9000/hive/XXXX/sqooptest
每次需要hadoop dfs -rm -R /user/root/sqooptest后才可重复导入,请问如何处理这个问题啊?
hadoop2.6.0
hive1.0.0
sqoop1.4.5
password
,
master
,
import
,
mysql
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
相关帖子
.
基于CDH5.x 下面使用eclipse 操作hive 创建表出现的问题及解决
.
各位大神!求帮我讲一道mysql的题
.
【小白求解】master和node的地址改后, 服务起来了,但是显示之前的地址超时
.
求解答cdh5添加hive 时要求输入MySQL用户密码,测试联通性报错?
.
Hbase shell 启动报错,使用status命令报 master is initializing
.
【求助】群集安装,检测不到master
.
无法添加当前的master主机到managed hosts中??
.
sqoop 数据转移问题 from mysql to hive
.
配置gnocchi作为Grafana数据源报错:is CORS correctly configured ?"
.
如何计算HDFS文件上传时间
已有(2)人评论
电梯直达
正序浏览
jixianqiuxue
发表于 2015-5-8 13:43:23
本帖最后由 jixianqiuxue 于 2015-5-8 13:45 编辑
重复导入应该是产生这么个文件。
楼主换个其他名字,如果不想这么做,只能二次开发了
回复
使用道具
举报
显身卡
evababy
发表于 2015-5-8 14:36:24
刚才不明白这个文件作用,经过群里帮忙,经过详细测试总结如下:
这个文件是存储临时数据和执行结果,可以通过--target-dir <dir>制定文件位置,每次都会产生一个结果文件,如果结果文件存在时,且再次执行冲突时会提示此文件已经存在的错误。
1、正常时候确实需要指定不同的名字来区分每次直接结果。
2、但还可以通过增加命令--delete-target-dir来声明每次执行时覆盖文件
回复
使用道具
举报
显身卡
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
最佳新人
积极上进,爱好学习
热心会员
经常帮助其他会员答疑
发表新帖
evababy
高级会员
关注
31
主题
258
帖子
12
粉丝
TA的主题
救命啊,启动后特定机器无法加载region导致迁移给其他机器
2019-5-16
alluxio挂载hdfs问题
2019-4-24
hadoop控制台柱形图,求解释啊
2019-4-23
请问如何对标进行全表合并处理?
2018-10-26
用sqoop从mysql导入hbase问题
2018-7-30
24小时热文
幕后产品:打造突破式产品思维
像高手一样发言:七种常见工作场景的说话之
副业警钟,新型法律碰瓷发财方式:批量诉讼
Spark机器学习
Spark机器学习算法、源码及实战详解
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈