我是java初学者，想做hadoop开发，需要会使用spring这类java开发框架吗？需要了解java开发的什么知识？

秋风清逸 2015-9-11 1 8453

hadoop新手，请大神帮忙！ 环境：win7 x64 + eclipse + VMWare + hadoop1.2.1 + jdk1.6 程序结构： 问题描述：有2个c ...

冰诺莫语 2015-9-9 2 12122

查看官方API和看博客都推荐使用（据说是2.4新API） implements Tool 重写run方法。 本人使用hadoop2.6 官方文档如图所示 ...

skippersky 2015-9-6 3 9700

下面是MR程序代码，在Eclipse上把程序打成jar包，丢到Linux上运行，报异常: 15/09/05 04:58:37 INFO ipc.Client: Retrying conn ...

啊耀 2015-9-5 2 14151

最近在做一个需求，数据源：全国分店信息表（分店ID，省市），需要求出全国每个分店附件一百米的分店列表，两个分店的距离通过距 ...

foreverfeng168 2015-9-1 2 9546

//主要功能是从hbase中读一条URL执行，很简单的代码： public static class CrawlReducer extends TableRed ...

阿斯兰的 2015-9-2 8 16262

我按http://www.cnblogs.com/shishanyuan/p/4646654.html的第一题的操作，求工资总和，为什么我的运行结果比正确答案少了一行？ ...

Gomestone 2015-8-25 1 8664

hadoop 2.7.1 之前都用本地模式，只有结果提交到hadoop，最近发现了，修改了代码，报错了 可以帮忙理解下下面的端口么： ...

aqi915 2015-8-25 6 23448

对于一定的数据量，是不是Hadoop集群的规模越大，Mapreduce的计算时间越快呀？？

jingfengvae 2015-8-15 3 9168

有没有hadoop2.7.1 hadoop.dll包括winutils.exe文件呢？32位的，要用windows 左面远程到linux 服务器操作。这两个文件可以给个 ...

aqi915 2015-8-17 1 32535

最近在做一个项目，需要统计每日近某个时间段（如：近一年，近30日，近60日）的平均值，标准差，方差，请问大路大神，有木有比较 ...

foreverfeng168 2015-8-13 3 31312

hadoop2.7.1版本，在web查看mapreduce运行情况的端口是多少呢，有用过的没呢？

刘聪 2015-8-13 2 8907

什么时候运行Combiner？ 1、当job设置了Combiner，并且spill的个数到min.num.spill.for.combine(默认是3)的时候，那么combiner ...

tntzbzc 2015-6-15 7 38589

Map之后的数据经过Partition处理后，按照Key来分发数据到相应的Reduce上面去。 如果我不想让他按照Key分发，我想 ...

yongjian3311 2015-7-29 2 12359

之前面试过一些大数据的职位，当然肯定要被问到一些内容的。那么我就说说几点 1. Hadoop如果一个Task运行比其它的慢，你如何 ...

Joker 2015-7-27 2 11210

为什么我的mapreduce程序在本地计算结果与Hadoop集群上的运算结果不一样？？？

jingfengvae 2015-7-24 4 9981

写好的解码包 现在想以文件名为key 以文件内容（待解码文件）为value 调用解码程序 进行分布式解码 也就是在mapper中调用 ...

zcfightings 2015-7-23 1 8162

需求：有一加密的流式文件 想使用分布式的方式加快解密（解密前是流式文件，解密后的数据是有格式的）。 疑惑：想用sequenceFil ...

zcfightings 2015-7-23 3 11557

请教各位大牛，如题，有什么好的方法用MapReduce创建一个在命令行指定行列数的随机矩阵？

Gatsby 2015-7-22 3 11611

默认hadoop环境已搭建完全 1.打jar将自己的代码打jar包。例打成MyJob.jar,上传到hadoop安装目录下share/test/MyJob.jar 2.执 ...

rain1201 2015-7-10 1 9681

这两天学习安装ganglia来监控hadoop集群，但是安装成功后在浏览器中只能看到主节点master，而且集群名字为默认的unspecified 我 ...

树叶的狂欢 2015-7-10 1 14504

请问mapreduce中。。。reduce一定要等到所有的map全部结束才可以开始工作么。。。

Rekklesly 2015-7-7 1 13880

eclipse 插件端口都是如何填写？ 下面参考：

bob007 2015-7-6 1 10256

运行mapreduce程序的Map阶段时，hadoop通过产生多个map任务自动实现并行化，并且通过Web UI界面可以看到任务运行的详细信息，包 ...

elena 2015-7-2 3 11924

现在hdfs中有两个文件 怎么能在map端两个文件统计完后，在进行reduce端处理 解决办法： 用组合式 让你真正明白什么是Ma ...

nextuser 2015-7-1 1 10146

之前eclipse连接到hdfs上开发是可以运行的， 现在，在输入hdfs://就出错了。 core,hdfs两个文件放在src路径下了 现在出现 ...

Joker 2015-6-28 5 26014

为什么没有出现结果呢，就是实现简单的比如nation为 ”China“，就转换为 ”中国“ 输出.

风颖尘 2015-6-28 1 14298

前天在这里下载了《Hadoop视频[共44集适合入门 MP4格式]》的视频回去看了，然后按照第15集的代码，写代码在自己搭建的hadoop下 ...

linbowei 2015-6-26 6 270374

1.请问各位有没有hadoop相关的分析工具软件介绍下。 2.请问能否统计MapReduce运算时间与I/O时间，就是能否将这两者分开统计时间 ...

树叶的狂欢 2015-6-25 4 13839