Executor中core

查看数: 6512 | 评论数: 2 | 收藏 0

关灯 | 提示：支持键盘翻页<-左右->

发布时间: 2017-3-5 17:42

Task每个都会被分配到集群上的某个节点的某个Executor去执行。每个节点可以起一个或多个Executor。每个Executor由若干core组成，每个Executor的每个core一次只能执行一个Task。每个Task执行的结果就是生成了目 ...

w517424787 发表于 2017-3-6 15:43:34

spark在读取hdfs上数据时，初始的时候partition数就默认等于文件的block数，咋还进行block合并呢?

图文精华