如何从Web到Spark集群？

你可以了解一下  spark  REST

这里简单说一下
REST与传统HTTP的关系：

REST则严格要求
1. GET只能用于读取资源，
2. POST用于创资源，
3. PUT用于更新资源，
4. DELETE用于删除资源。




一个Web平台，使得每个人只要会Scala(或者SQL)，就能利用Spark强大的计算能力,Scala强大的表达能力进行各种数据分析，处理，这个就非常具有价值了。

基于该Web平台，我们可以编写/执行代码，运行SQL,上传依赖，监控任务，

目前已经有一个开源项目
git下载：
spark-jobserver(https://github.com/ooyala/spark-jobserver)【此链接通过git下载】 在做类似的事情，但依然有比较大的局限。（git安装可以参考软件版本控制-在Windows中使用Git视频介绍）

附件：
spark-jobserver.rar (481.69 KB, 下载次数: 1, 售价: 1 云币)

2014-8-28 16:07 上传

点击文件名下载附件


包括:

比如业界为了复用同一套系统，一般会让spark 跑在yarn上。但是目前该系统只支持 standalone 和 Mesos
提供restfull API，足够灵活，但太过底层，提供强大的Web UI才是更友好的。







关于 Spark SQL/Shark可以了解：

代号为 Jaws 的 jaws-spark-sql-rest 是一个 Spark SQL/Shark 队列的 RESTful 服务，基于 Spark ，提供 Mesos 和 Tachyon 支持。当前支持 Spark 0.9.x 和 Shark 作为后端框架。

这里有篇文章，也可以参考：
http://www.aboutyun.com/thread-8937-1-1.html

这里有一个相关的PDF你也可以看一下。总体来说这个spark的 web还不怎么成熟

链接：http://pan.baidu.com/s/1Gn9Ci 密码：mnjl