About云-梭伦科技»专题 › 交流区 › 技术交流 › Spark › 【疑问】local有效集群无效。sprakStream 实时监控hdfs ...

【疑问】local有效集群无效。sprakStream 实时监控hdfs文件增量获取不到数据

查看数: 7565 | 评论数: 2 | 收藏 0

关灯 | 提示：支持键盘翻页<-左右->

帖子模式

feigee

发布时间: 2017-3-13 15:46

正文摘要:

[mw_shl_code=bash,true]nohup spark-submit --class 'WordCount' --master local[2] --name 'localTest' sparkdemo-1.0-SNAPSHOT.jar > logs/aaa.log &[/mw_shl_code]本地执行 master为 ...

feigee 发表于 2017-3-13 16:44:49

解决了，谢谢。这个论坛资源还是很多的。参考链接spark运行打包的jar程序，遇到接受不到任务资源的问题

nextuser 发表于 2017-3-13 16:43:36

具体需要看源码。
楼主是自己写的吧。
端口为何是8081，最好采用规定端口

图文精华

【疑问】local有效集群无效。sprakStream 实时监控hdfs文件增量获取不到数据

正文摘要:

回复

推荐 /2

图文精华

【疑问】local有效 集群无效。sprakStream 实时监控hdfs文件增量获取不到数据

正文摘要:

回复

推荐 /2

【疑问】local有效集群无效。sprakStream 实时监控hdfs文件增量获取不到数据