worker连不上master,已困4天。。。

查看数: 65659 | 评论数: 16 | 收藏 0
关灯 | 提示:支持键盘翻页<-左 右->
    组图打开中,请稍候......
发布时间: 2015-6-2 14:17

正文摘要:

本帖最后由 pig2 于 2015-6-2 14:50 编辑 SSH 可以互相无密码登陆,ping也能ping通。但是worker就是连不上master vanxd@master:~/i/Spark/spark-1.3.1-bin-hadoop2.6/sbin> ./start-all.sh starting org.a ...

回复

yisun123456 发表于 2017-9-12 18:12:26
crontab 发表于 2015-11-29 21:27
**** 作者被禁止或删除 内容自动屏蔽 ****

不好使啊
yisun123456 发表于 2017-9-12 18:11:10
l206xd 发表于 2015-6-5 13:52
没人之道了么....

楼主解决了吗 同样问题
yisun123456 发表于 2017-9-12 18:10:37
楼主解决了吗 同样问题
crontab 发表于 2015-11-29 21:27:54
export SPARK_MASTER_IP=xx.xx.xx.xx
export MASTER=spark://hadotest1:7077
export SPARK_MASTER_PORT=7077
export SPARK_WORKER_CORES=1
export SPARK_WORKER_INSTANCES=1
export SPARK_WORKER_MEMORY=8g
应该声明一下master_ip 就可以了吧
crontab 发表于 2015-11-29 21:23:45
这个问题也困扰了我很久,最后通过修改spark-env.sh解决了
evababy 发表于 2015-6-10 13:57:35
SPARK_MASTER_IP直接写IP
注释 如下hosts,只保留集群间解析
#127.0.0.1 ……
#::1 ……
l206xd 发表于 2015-6-5 13:52:30
没人之道了么....
l206xd 发表于 2015-6-3 11:29:16
ding123lei 发表于 2015-6-3 09:46
你的master和ip有没有加入到/etc/hosts里面
或者你的SPARK_MASTER_IP直接使用ip地址呢?

可以直接ssh master, ssh slave1
hosts文件已经配号了..
直接写IP,也不行..

levycui 发表于 2015-6-3 10:35:46
看看防火墙是否关闭,redhat、centos看看selinux,iptables
关闭

推荐上一条 /2 下一条