分享

hadoop中HDFS与opesntack的swift有何不同

hyj 发表于 2014-2-8 00:39:01 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 17543
提示: 作者被禁止或删除 内容自动屏蔽

已有(4)人评论

跳转到指定楼层
好梦一场睡 发表于 2014-12-5 15:07:31
您好,我想问一下,在HDFS中上传数据时先选中一个datanode传送数据,同时利用这个节点以流水的形式向其他节点传送,但是在Swift中好像是由代理节点同时向三个节点进行数据传送,这样如果多人上传数据,会不会是上传速度变慢,还有就是可以在Swift上实现这种流水复制副本的形式吗?
回复

使用道具 举报

desehawk 发表于 2014-12-5 16:26:52
好梦一场睡 发表于 2014-12-5 15:07
您好,我想问一下,在HDFS中上传数据时先选中一个datanode传送数据,同时利用这个节点以流水的形式向其他节 ...



不知道楼主说的流水是个什么概念:
在hadoop2中为了解决单点问题,采用了journalnode,详细参考:


Hadoop2.x是如何解决NN(namenode)单点故障问题



这样如果多人上传数据,会不会是上传速度变慢

对于楼主的担忧,任何系统只要一上量都会存在问题,都会存在性能问题
回复

使用道具 举报

好梦一场睡 发表于 2014-12-5 16:33:55
desehawk 发表于 2014-12-5 16:26
不知道楼主说的流水是个什么概念:
在hadoop2中为了解决单点问题,采用了journalnode,详细参考:
...

要不您先看看这个文章http://www.zhihu.com/question/21852470,说的是HDFS副本写时复制,我想知道在Swift能否也实现这个
回复

使用道具 举报

好梦一场睡 发表于 2014-12-5 18:18:45
http://www.zhihu.com/question/21852470这个说的就是HDFS的数据写时复制机制,可不可以在Swift中实现?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条