分享

Hadoop新闻:Apache Hadoop 2.4.0已经发布

阿飞 发表于 2014-4-12 12:10:00 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 7993
本帖最后由 pig2 于 2014-4-12 12:12 编辑
这个月的2014年4月7号,Apache Hadoop 2.4.0已经发布了,Hadoop 2.4.0是2014年第二个Hadoop发布版本(在2月20日发布了Apache Hadoop 2.3.0),他在HDFS上做了一些加强,比如对异构存储层次的支持和通过数据节点为存储在HDFS中的数据提供了内存缓存功能。在Hadoop2.4.0主要做了以下工作:
  (1)HDFS支持访问控制列表(ACLs,Access Control Lists);
  (2)原生支持HDFS滚动升级;
  (3)HDFS FSImage用到了 protocol-buffers,从而可以平滑地升级;
  (4)HDFS完全支持HTTPS;
  (5)YARN ResourceManager支持自动故障转移,解决了YARN ResourceManager的单点故障;
  (6)对YARN的Application History Server和 pplication Timeline Server上的新应用加强了支持;
  (7)通过抢占使得YARN Capacity Scheduler支持强SLAs协议;

翻译的可能不太好,大家可以参见英文原文:
  (1)upport for Access Control Lists in HDFS
  (2)Native support for Rolling Upgrades in HDFS
  (3)Usage of protocol-buffers for HDFS FSImage for smooth operational upgrades
  (4)Complete HTTPS support in HDFS
  (5)Support for Automatic Failover of the YARN ResourceManager
  (6)Enhanced support for new applications on YARN with Application History Server and Application Timeline Server
  (7)Support for strong SLAs in YARN CapacityScheduler via Preemption.

  目前,安全对于Hadoop来说至关重要,所以在Hadoop 2.4.0版本中对HDFS的所有访问(包括WebHDFS, HsFTP甚至是web-interfaces)都支持了HTTPS。
  在Hadoop 2.4.0解决了ResourceManager的单点故障。这样会在集群中存在两个ResourceManager,其中一个处于Active;另一个处于  standby。当Active的出现故障,这样Hadoop可以自动平滑地切换到另外一个ResourceManager,这个新的ResourceManager将会自动的重启那些提交的applications。在下一阶段,Hadoop将会增加一个热standby(add a hot standby),这个standby可以继续从故障点运行的应用程序,以保存任何已经完成的工作。



iteblog




已有(1)人评论

跳转到指定楼层
junzi234 发表于 2014-6-11 17:37:49
恩恩 看着不错的样子
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条