搜索
搜 索
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
圈子
›
about云小组
›
about云VIP小组群
›
Flink checkpoint机制 barrier的理解【VIP探讨问题记录 ...
0
0
1
分享
Flink checkpoint机制 barrier的理解【VIP探讨问题记录】
阿飞
发表于 2019-11-27 14:25:12
[显示全部楼层]
只看大图
阅读模式
关闭右栏
0
982
这里给咱们成员讨论的问题:
分散式快照,觉得应该是做了一种标记,标记这些数据都属于barrier n
如果是插入barrier的话,当并行度为2的话,是怎么做到两个barrier n的?
对于barrier 其实可以视其为一条记录。
为何在数据源处会有两个barrier n,而不是一个。
source也有并行度,比如数据库是数据源,它并不会在数据源处加标记,而是在读取的时候加标记,读取的时候,因为已经设置了并行度。所以会有2个barrier
也就是会在source task里加标记
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
没找到任何评论,期待你打破沉寂
发表新帖
阿飞
超级版主
关注
1893
主题
1999
帖子
123
粉丝
TA的主题
华为OD目标院校名单(2024.07新版)
2024-7-19
国/央企投递全流程经验分享
2024-7-15
2024年了,互联网大厂福利还香吗?
2024-5-23
华为3年涨薪6次,每次涨薪高达3万
2024-5-14
华为OD面试
2024-5-13
24小时热文
矩阵分析引论罗家洪(第四版)
互联网大厂年终福利曝光:看看别人家老板怎
像高手一样发言:七种常见工作场景的说话之
携程允许员工春节回乡办公2个月
数据治理实施方案
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈