分享

有关Hadoop管理调度图形界面有没有开源项目可以参考?

准备用Hadoop实现并行计算、并行数据库计划、拥有图形界面的管理调度程序。

因为不想用命令行。

想问有没有开源的图形界面的程序可以管理调度Hadoop的?

已有(4)人评论

跳转到指定楼层
s060403072 发表于 2015-4-21 11:50:36
使用Cloudera CDH

了解更深,可以看看这个
Cloudera Manager、CDH零基础入门、线路指导
回复

使用道具 举报

huntagain 发表于 2015-4-21 11:52:01
我对Apache Ambari 和 Cloudera hue 分不清。
Apache Ambari是一个基于web的工具,用于配置、管理和监视Apache Hadoop集群,支持Hadoop HDFS,、Hadoop MapReduce、Hive、HCatalog,、HBase、ZooKeeper、Oozie、Pig和Sqoop。Ambari同样还提供了集群状况仪表盘,比如heatmaps和查看MapReduce、Pig、Hive应用程序的能力,以友好的用户界面对它们的性能特性进行诊断。

Hue是cdh专门的一套web管理器,它包括3个部分hue ui,hue server,hue db。hue提供所有的cdh组件的shell界面的接口。你可以在hue编写mr,查看修改hdfs的文件,管理hive的元数据,运行Sqoop,编写Oozie工作流等大量工作。

请问这两者有什么区别?哪个可以用于管理mapreduce作业和并行数据库?
回复

使用道具 举报

arsenduan 发表于 2015-4-21 12:47:29
huntagain 发表于 2015-4-21 11:52
我对Apache Ambari 和 Cloudera hue 分不清。
Apache Ambari是一个基于web的工具,用于配置、管理和监视Ap ...



hue
为什么产生hue,hue的出发点是hadoop的ui。
功能:
1.可以查看hdfs
2.编辑hive和运行hive查询
3.solr查询、浏览数据及dashboards
4.Impala查询
5.spark编辑器及dashboard
6.pig编辑器及提交脚本
7.Oozie编辑器及Dashboard
8.浏览hbase及查看、查询、修改表
9.查看hive元数据及hive 目录
10.显示mapreduce job
11.设计job,创建MapReduce/Streaming/Java jobs
12.Sqoop 2编辑器和Dashboard
13.查看zookeeper,及ZooKeeper编辑器
14.数据库查询编辑器比如MySql, PostGres, Sqlite and Oracle

——————————————————————————————————————————
ambari
为什么产生ambari,ambari出发点是使hadoop更容易配置、管理、监控

为了实现这个目标所以产生了web ui。
包括三大功能:
配置hadoop集群
管理hadoop集群
监控hadoop集群



###################################################
也就是说ambari的目标比hue更高更大
它不只是提供ui,而且还是hadoop部署更容易。


回复

使用道具 举报

arsenduan 发表于 2015-4-21 12:49:33
huntagain 发表于 2015-4-21 11:52
我对Apache Ambari 和 Cloudera hue 分不清。
Apache Ambari是一个基于web的工具,用于配置、管理和监视Ap ...

两个都可以,根据上面介绍,楼主可以自行选择
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条