spark全局计数器每次执行结果不一样

查看数: 10791 | 评论数: 2 | 收藏 0

关灯 | 提示：支持键盘翻页<-左右->

发布时间: 2016-11-29 21:34

最近闲着无聊从网上下载了一个去年叫流行的2000W开房数据，数据格式如下：对其中一个文件进行解析，解析的时候发现gender那一栏有时候没有数据，然后就想着如果gender一栏数据不符合要求就从身份证号对性别 ...

desehawk 发表于 2016-11-30 11:06:51

多运行几次看看什么结果

langke93 发表于 2016-11-30 08:23:20

程序的逻辑没有错，最可能原因是数据丢失了。运行的过程中，楼主看看是不是有的客户端出问题了

图文精华