分享

Eclipse向Spark集群提交任务时找不到主类

alu1105 发表于 2016-6-13 19:51:44 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 16792
刚接触Spark想用Java先练练手。
集群是CentOS6.5,装的是CDH5.0.1,里面的spark版本是0.9.0
现在在windows系统上用eclipse向集群提交java程序,运行的时候提示是找不到程序的主类,就是有main函数的那个
大概查了下,是要把程序的jar包放到集群的master上么?
要是这样的话也太麻烦了,应该有简便的方法吧
大神求教

已有(4)人评论

跳转到指定楼层
langke93 发表于 2016-6-13 20:38:04
有的,自己调试即可
下面文章推荐,希望有所帮助

Spark通过IntelliJ IDEA远程调试
http://www.aboutyun.com/forum.php?mod=viewthread&tid=9877


Spark 1.5.0 远程调试

http://www.aboutyun.com/forum.php?mod=viewthread&tid=15679


Spark插件二次开发在Eclipse的调试配置

http://www.aboutyun.com/forum.php?mod=viewthread&tid=8463



回复

使用道具 举报

lihy114 发表于 2016-6-14 09:10:42
在windows系统上用eclipse向集群提交java程序,不需要将jar包上传到spark集群的,可以直接运行
回复

使用道具 举报

alu1105 发表于 2016-6-14 09:34:02
lihy114 发表于 2016-6-14 09:10
在windows系统上用eclipse向集群提交java程序,不需要将jar包上传到spark集群的,可以直接运行

具体怎么做,run as java application 的话会报错
回复

使用道具 举报

lihy114 发表于 2016-6-14 14:08:26
看你代码怎么写的了,环境咋搭建的
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条