分享

Hadoop 2.5.0新特性和改进

pig2 2014-8-13 17:14:26 发表于 介绍解说 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 20294
问题导读:
1.Common做了哪些改变?
2.HDFS增加了哪些支持?
3.REST API支持哪些功能?





Apache Hadoop 2.5.0是一个在2.x.y发布线上的一个小版本,建立在之前稳定的发布版本2.4.1之上。主要特性和改进:

1. Common

a) 使用HTTP代理服务器时认证改进。当通过代理服务器使用WebHDFS时这是非常有用的。

b) 增加了一个新的Hadoop指标监控sink,允许直接写到Graphite。

c) Hadoop文件系统兼容相关的规范工作。

2. HDFS

a) 支持 POSIX风格的扩展文件系统。更多细节查看Extended Attributes in HDFS文档。

b) 支持离线image浏览,客户端现在可以通过WebHDFS的API浏览一个fsimage。

c) NFS网关得到大量可支持性的改进和bug修复。Hadoop portmapper不在需要运行网关,网关现在可以拒绝没有权限的端口的连接。

d) SecondaryNameNode, JournalNode, and DataNode 的web UI已经使用HTML5和JS美化。

3. YARN

a) YARN的REST API现在支持写/修改操作。用户可以用REST API提交和杀死应用程序。

b) 时间线存储到YARN,用来存储一个应用通用的和特殊的信息,支持Kerberos认证。

c) 公平调度器支持动态分层用户队列,运行时,用户队列在任一指定的父队列中被动态的创建。

相关包:hadoop2.5发布:最新编译 32位、64位安装、源码包、API以及新特性



############################################################
原文链接:http://blog.csdn.net/xichenguan/article/details/38538315作者:chen517611641


已有(2)人评论

跳转到指定楼层
sunny62520 发表于 2014-8-13 23:58:10
MARK,感谢分享
回复

使用道具 举报

旧收音机 发表于 2014-12-5 23:59:25
感谢兄弟的无私分享和讲解
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条