用户组:游客
问题导读 1.Hadoop3.3支持JDK哪个版本? 2.SCM是什么? 3.YARN应用程序做了哪些改进? 4.整合腾讯云实现了什么文件系统? ...
看这篇文章请出去跑两圈,然后泡一壶茶,边喝茶,边看,看完你就对hadoop整体有所了解了。 Hadoop简介 Hadoop就是一个实现 ...
本帖最后由 pig2 于 2014-3-7 22:07 编辑 本文合适和对mapreduce有一定了解,并且产生各种问题的同学,算是一个解惑篇。如果刚 ...
刚才发现一张讲解mapreduce整个工作机制图,跟大家分享一下,大家发表一下建议,对mapreduce工作机制有何看法,或者那里有不清楚 ...
本帖最后由 nettman 于 2014-7-9 12:07 编辑 有时候我们在用,但是却不知道为什么。就像苹果砸到我们头上,这或许已经是很自然 ...
已经讲了一篇mapreduce编程模型,这里从另外一角度,感觉也不错。引用一个经典的图片来说明问题. 可以带着下面问题来阅读: ma ...
1.思想起源: 我们在学习mapreduce,首先我们从思想上来认识。其实任何的奇思妙想,抽象的,好的想法、都来源于我们生活 ...
本帖最后由 nettman 于 2014-7-9 00:14 编辑 问题导读: 1.如何使用hadoop-eclipse-plugin远程连接hadoop? 2.使用window ...
本帖最后由 nettman 于 2014-3-6 00:37 编辑 我们了解mapreduce的作用是什么,我们还可以详细了解下面内容:RecordReader的作 ...
当我们看到这个例子的时候,我们是否想过: mapreduce是否可以完成我们传统开发中经常遇到的一些任务。例如排序、平均数、批量w ...
本帖最后由 nettman 于 2014-7-5 21:32 编辑 问题导读 1.map与reduce中key与value有什么不同? 2.shuffle的作用是什么? ...
本帖最后由 pig2 于 2014-5-1 01:24 编辑 本人适合对mapreduce有一定经验人来阅读,对于新手来讲,只是阅读前面会有收获不少, ...
阅读本文可以带着下面问题: 1.map和reduce的数量过多会导致什么情况? 2.Reduce可以通过什么设置来增加任务个数? 3.一个tas ...
在Hadoop的reducer类中,有3个主要的函数,分别是:setup,clearup,reduce。代码如下: 在用户的应用程序中调用到red ...
阅读本文可以带着下面问题: 1.你对mapreduce了解多少? 2.通过排序你是否对mapreduce有新的认识? ---------------------- ...
本帖最后由 nettman 于 2014-5-1 13:12 编辑 问题导读: 1.Partitioner分区类的作用是什么? 2.getPartition()三个参数分 ...
问题导读: 1.如何在讲mapreduce函数中的字符串等信息,输出到eclipse控制台? 2.除了使用下文方法,还有其它方法输出到控制 ...
问题导读: 1.Hadoop对于一个记录行形式的文本,会不会造成一行记录被分到两个Block当中? 2.在把文件从Block中读取出来进行切 ...
本帖最后由 pig2 于 2014-6-2 13:18 编辑 问题导读 1.mapreduce程序与其他Java程序的区别是什么? 2.map类,reduce类可否放 ...
本帖最后由 pig2 于 2014-8-3 22:33 编辑 问题导读: 1.我们所定义的map函数与reduce函数是用来干什么的? 2.key和value分别 ...
本帖最后由 pig2 于 2014-3-6 21:18 编辑 此篇需要理解了解hadoop的mapreduce作为基础,否则可能半懂不懂,对于 1.hbase MapR ...
本帖最后由 pig2 于 2014-5-1 01:20 编辑 问题导读: 1.我们所定义的map函数与reduce函数是用来干什么的? 2.key和value分别 ...
我们可以带着下面问题来阅读为什么需要在Mapper端进行归约处理?为什么可以在Mapper端进行归约处理?既然在Mapper端可以进行归约 ...
HDFS+MapReduce+Hive十分钟快速入门1. 前言本文的目的是让一个从未接触Hadoop的人,在很短的时间内快速上手,掌握编译、安装 ...
问题导读: 很多同学都想看到调试信息, 1.如何调试map? 2.通过什么设置可以调试reduce? Hadoop调试是比较麻烦 ...
本帖最后由 xuanxufeng 于 2015-8-27 21:59 编辑 问题导读 1.什么链式mapreduce? 2.链式mapreduce解决了什么问题? 3.如何 ...
本帖最后由 eying 于 2015-11-18 21:25 编辑 问题导读: 1.Redis是什么? 2.Redis数据结构是什么? 3.Redis的 ...
本帖最后由 desehawk 于 2015-3-19 11:48 编辑 问题导读 1.在Reudce端进行连接,reduce端的主要工作有哪些? 2.在Map端进 ...
问题导读: 1、什么是MapReduce? 2、Mapper、Reducer实现什么工作内容? 3、如何进行MapReduce性能调优? MapReduce ...
本帖最后由 eying 于 2015-11-11 17:47 编辑 问题导读: 1.爬虫如何使用分布式? 2.JAVA的单机爬虫的功能? 3.非 ...
Map Reduce是包含两个过程:Map过程和Reduce过程。每一个过程都包含键值对作为输入,程序员可以选择键和值的类型。Map和Reduce的 ...
本版积分规则 发表帖子
查看 »