搜索
搜 索
本版
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
技术学习(版主发帖区)
›
大数据学习
›
概念型
›
单机模式、伪分布模式、完全分布式详解
0
4
1
分享
单机模式、伪分布模式、完全分布式详解
admin
2014-2-8 22:51:33
发表于
概念型
[显示全部楼层]
阅读模式
关闭右栏
4
71701
问题导读
1.单机模式、伪分布模式、全分布式模式的区别在什么地方
单机模式(standalone)
单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。
评论:此程序一般不建议安装,网络上很少这方面资料
伪分布模式(Pseudo-Distributed Mode)
伪分布模式在“单节点集群”上运行Hadoop,其中所有的守护进程都运行在同一台机器上。该模式在单机模式之上增加了代码调试功能,允许你检查内存使用情况,HDFS输入输出,以及其他的守护进程交互。
评论:比如namenode,datanode,secondarynamenode,jobtracer,tasktracer这5个进程,都能在集群上看到。
5进程如下:
5进程的了解,详细可以查看
hadoop详细了解5个进程的作用
全分布模式(Fully Distributed Mode)
Hadoop守护进程运行在一个集群上。
评论:意思是说master上看到namenode,jobtracer,secondarynamenode可以安装在master节点,也可以单独安装。
slave节点能看到datanode和tasktracer
来自群组:
Hadoop技术组
单机
关注公众号,获取大数据、人工智能20套、区块链资源5阶段等资源,随时更新,获取最新技术资源
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
相关帖子
.
eclipse 调试hadoop需要注意编码问题
.
Storm单机运行是不是不需要启动zookeeper、Nimbus、Supervisor ?
.
单机中clinometer的部署
.
单机安装CM+CDH(一CM安装)
.
单机安装CM+CDH(二CDH安装)
.
单机spark 错误
.
spark 单机运行成功,如何使用or测试?
已有(4)人评论
电梯直达
正序浏览
InSight
发表于 2014-10-13 13:01:45
刚好再找三者安装之间的区别。感谢管理员分享。
回复
使用道具
举报
显身卡
AlexFeng
发表于 2015-4-24 13:42:43
回复
使用道具
举报
显身卡
alex.ly
发表于 2016-6-26 11:56:57
赞。不过从hadoop 2.x版本不再有jobtracker和tasktracker
回复
使用道具
举报
显身卡
Ehadoop
发表于 2016-8-6 09:30:45
作为一名初学者,有个问题困扰着我,希望高手能帮忙解答,以免走弯路,谢谢!!
hadoop是不是下面三种情况都能搭建
1.windows下直接搭建
2.windows下安装虚拟机,再安装linux,再在linux下搭建
3.双系统linux下直接搭建
4双系统linux下安装虚拟机,再虚拟机下搭建
我的笔记本年代有点久远,09年惠普,2G内存,系统xp 32位
1.上面四种情况是否行得通
2.哪种适合我现在的配置,搭建起来不会太卡,可不可以完全分布,还是只能伪分布或者单机
3.适合我现在配置的情况,所需下载全部配套软件是什么
回复
使用道具
举报
显身卡
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
发表新帖
admin
管理员
关注
1828
主题
2054
帖子
166
粉丝
TA的主题
互联网大厂年终福利曝光:看看别人家老板怎么宠员工!
昨天 19:07
携程允许员工春节回乡办公2个月
前天 16:36
求职,连接力比学历更管用
2024-12-19
2024面试套路悄然变化,2025不要在傻傻的刷八股了
2024-12-17
为什么一学习,就忍不住刷抖音,真的是控制力差吗!
2024-12-11
24小时热文
矩阵分析引论罗家洪(第四版)
互联网大厂年终福利曝光:看看别人家老板怎
像高手一样发言:七种常见工作场景的说话之
携程允许员工春节回乡办公2个月
数据治理实施方案
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈