Spark部署三种方式介绍：YARN模式、Standalone模式、HA模式

wcg57 · 发表于 2016-5-20 14:09:07

pig2 发表于 2014-3-13 02:28
Spark的部署让人有点儿困惑，有些需要注意的事项，本来我已经装成功了YARN模式的，但是发现了一些问题，出 ...

请教下一般生产哪种方式部署最多啊？

NEOGX · 发表于 2016-5-20 14:27:16

wcg57 发表于 2016-5-20 14:09
请教下一般生产哪种方式部署最多啊？

HA方式是最安全的，前两种适合开发和学习

wcg57 · 发表于 2016-5-21 10:11:39

NEOGX 发表于 2016-5-20 14:27
HA方式是最安全的，前两种适合开发和学习

其实楼主部署的分法有点乱了。大的三种模式，应该上standalone，mesos，yarn。而standalone又有HA模式。但是据说yarn本身如果已经resourcemanager 做了HA了的话，就不用再考虑HA了的。还要yarn本身还有2种模式，一种上master，一种client。我倾向于standalone的HA，还有yarn。但是具体yarn用什么模式，怎么配置，还是没有方向。