搜索
搜 索
本版
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
办公|编程助手
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
交流区
›
技术交流
›
HBase
›
hbase增加Snappy压缩方式
0
2
0
分享
hbase增加Snappy压缩方式
linjikai8888
发表于 2015-12-30 09:33:34
[显示全部楼层]
阅读模式
关闭右栏
2
7639
About云VIP帮助找工作和提升
我想请教几个问题:
1.我用一台可以联网的服务器,也就是我本机的虚拟机,先装好snappy了。
我的想法是想将/usr/loal/lib下的libsnappy*文件直接拷贝到 正式服务器(没法联网)hadoop的native上直接使用,正是服务器就跳过安装snappy的过程了。
小弟对linux不在行,不知是否可行?
2.我只想给hbase提供snappy压缩方式,需要对hadoop做设置吗?应该是不用的吧!
我看hadoop配置的也都是设置mapreduce计算的时候启用这种方法。还请相关人士帮忙解惑~!不甚感激~
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
已有(2)人评论
电梯直达
正序浏览
goldtimes
发表于 2015-12-30 14:07:02
两个都需要配置的。
这里有篇
Hadoop HBase 配置 安装 Snappy 详细教程
http://www.aboutyun.com/thread-6198-1-1.html
讲的还算详细
回复
使用道具
举报
显身卡
linjikai8888
发表于 2016-1-6 16:38:45
hbase 增加snappy压缩方式,昨天试了下,跟之前旧版本区别还是很大的。
像hadoop-snappy这些东西是不需要编译的。也不需要加入什么lib包。总之简单到爆炸!
我甚至怀疑 hadoop2.6.0和hbase1.0.0已经集成了snappy这个压缩方式。有可能不需要安装,改天我试下将上传的东西删掉,不更改配置,看snappy还可以奏效不!
之前没考虑到这个,所以我老实安装了snappy,并把snappy的相关lib文件都上传到集群的native目录下了。
回复
使用道具
举报
显身卡
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
发表新帖
linjikai8888
中级会员
关注
25
主题
81
帖子
6
粉丝
TA的主题
kafka多线程消费(同一个group)
2016-8-30
MR任务在reduce阶段超时!
2016-5-24
Resourse里面的时间应该怎么转换时区?
2016-5-17
JournalNode回复超时,导致namenode关闭
2016-5-7
MongoDB 在取String的时候,前面0会丢失的问题
2016-1-27
24小时热文
Flink CDC:新一代实时数据集成框架
蚂蚁面试就是不一样
如何高效学习
人情世故速查速用大全集
框架思维
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈