分享

通过eclipse 提交sc.textFile("XX").count() 报错

taoxw 发表于 2017-7-31 17:09:09 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 11 9547
taoxw 发表于 2017-8-1 09:39:23
我用本地模式就可以,用spark standalone yarn 的方式就不行
回复

使用道具 举报

nextuser 发表于 2017-8-1 09:41:02
taoxw 发表于 2017-8-1 09:36
我的操作很简单的
val df = sc.textFile("hdfs://192.168.8.210:8020/a.txt")
    println(df.count( ...

代码没有问题,那就是你的配置和提交方式还有内存。应该就这三个问题。
所以从这三方面入手。如果找不出来就贴出来看下。
回复

使用道具 举报

12
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条