搜索
搜 索
本版
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
交流区
›
技术交流
›
Storm
›
Storm是否能解决迭代性问题
0
2
0
分享
Storm是否能解决迭代性问题
星语心愿
发表于 2017-12-18 10:04:38
[显示全部楼层]
阅读模式
关闭右栏
2
4471
机器学习里面的提升(Boosting)问题在在线学习(online learning)上的应用。比如数据一个一个地到来,并通过多个弱学习器进行学习,每一个弱学习器的预测结果都影响下一个弱学习器的学习。问题在于弱学习器的个数是参数可变的(比如adaBoost里面的弱学习个数是参数可变的),串行程序可以通过迭代解决,使用storm做成分布式的该怎么解决呢?
storm
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
相关帖子
.
storm StormSubmitter.submitTopology问题
.
Storm单机运行是不是不需要启动zookeeper、Nimbus、Supervisor ?
.
搞了两天没找到问题,求帮忙kafka+storm,在线等
.
Spark新人关于Spark Stream应用的一些疑问,望大神帮忙解答,不胜感激~
已有(2)人评论
电梯直达
正序浏览
qcbb001
发表于 2017-12-18 10:32:57
既然它们是先后影响的,可以使用spark,spark一个Job里的Stage都是串行的.
回复
使用道具
举报
显身卡
qcbb001
发表于 2017-12-18 10:39:31
还可以设置调度为fifo,这样job就是串行了。
探索Spark源码---在Spark中Job是并行执行的还是串行执行的?
http://www.aboutyun.com/forum.php?mod=viewthread&tid=16502
回复
使用道具
举报
显身卡
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
发表新帖
星语心愿
中级会员
关注
10
主题
29
帖子
5
粉丝
TA的主题
在Spark中怎么实现对一个二维数组的读与写
2018-5-25
在集群中,spark从hdfs中是怎么加快读取数据的,另外spark分区在集群中是怎么分布的
2018-5-24
如何通过代码统计spark在shuffle阶段所消耗的时间
2018-5-22
kafka+SparkStreaming任务不断提交,却一直阻塞,求解答
2018-5-13
如何关掉Cloudera quickStart-vm-5.13里面不需要的服务
2018-5-6
24小时热文
矩阵分析引论罗家洪(第四版)
互联网大厂年终福利曝光:看看别人家老板怎
像高手一样发言:七种常见工作场景的说话之
携程允许员工春节回乡办公2个月
数据治理实施方案
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈