分享

单机模式、伪分布模式、完全分布式详解

admin 2014-2-8 22:51:33 发表于 概念型 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 71701
问题导读
1.单机模式、伪分布模式、全分布式模式的区别在什么地方



单机模式(standalone)
       单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。

评论:此程序一般不建议安装,网络上很少这方面资料

伪分布模式(Pseudo-Distributed Mode)
      伪分布模式在“单节点集群”上运行Hadoop,其中所有的守护进程都运行在同一台机器上。该模式在单机模式之上增加了代码调试功能,允许你检查内存使用情况,HDFS输入输出,以及其他的守护进程交互。


评论:比如namenode,datanode,secondarynamenode,jobtracer,tasktracer这5个进程,都能在集群上看到。
5进程如下:


5进程的了解,详细可以查看hadoop详细了解5个进程的作用

全分布模式(Fully Distributed Mode)
Hadoop守护进程运行在一个集群上。

评论:意思是说master上看到namenode,jobtracer,secondarynamenode可以安装在master节点,也可以单独安装。
slave节点能看到datanode和tasktracer

来自群组: Hadoop技术组

已有(4)人评论

跳转到指定楼层
InSight 发表于 2014-10-13 13:01:45
刚好再找三者安装之间的区别。感谢管理员分享。
回复

使用道具 举报

AlexFeng 发表于 2015-4-24 13:42:43
回复

使用道具 举报

alex.ly 发表于 2016-6-26 11:56:57
赞。不过从hadoop 2.x版本不再有jobtracker和tasktracker
回复

使用道具 举报

Ehadoop 发表于 2016-8-6 09:30:45
作为一名初学者,有个问题困扰着我,希望高手能帮忙解答,以免走弯路,谢谢!!
hadoop是不是下面三种情况都能搭建
1.windows下直接搭建
2.windows下安装虚拟机,再安装linux,再在linux下搭建
3.双系统linux下直接搭建
4双系统linux下安装虚拟机,再虚拟机下搭建

我的笔记本年代有点久远,09年惠普,2G内存,系统xp 32位
1.上面四种情况是否行得通
2.哪种适合我现在的配置,搭建起来不会太卡,可不可以完全分布,还是只能伪分布或者单机
3.适合我现在配置的情况,所需下载全部配套软件是什么
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条