基于Docker的Hadoop as a Service API

问题导读
1、你如何理解什么是Cloudbreak？
2、如何在各种云上使用Hadoop服务，有哪些部分构成？
3、AWS EC2的网络调度你如何理解？







上周六去参加eBay上海大数据峰会，认识了Luke，eBay刚刚开源的分布式分析引擎Kylin项目（http://www.csdn.net/article/2014-10-25/2822286）就是他命名的。项目刚刚开源就有了Docker镜像，于是小编很好奇，于是Luke给我介绍了镜像的制作方SequenceIQ。SequenceIQ是一家提供Hadoop服务的初创公司，2014年的Hadoop Summit上，SequenceIQ介绍了自家的基于Docker的，云平台无关的，完全开源的Hadoop服务API，名叫Cloudbreak（https://accounts.sequenceiq.com/）。也就是说你可以利用Cloudbreak提供的API，在各种云上使用Hadoop服务了。

其底层主要包括以下四个组件：
Docker容器：所有Hadoop服务都安装在Docker容器中，这些容器可以“飞”在不同的云中；
Apache Ambari：用来定义一个Hadoop集群；
Serf：用于集群成员的管理，编排
dnsmasq：为Docker容器提供域名服务。

Docker终于和最热的Hadoop技术有结合了！











































































本文转载自：http://mp.weixin.qq.com/s?__biz= ... be4c38d13ee57176#rd