用户组:游客
已经在集群机器的mapred-site.xml中设置了mapred.tasktracker.reduce.tasks.maximum为10,同时在代码中也设置了jobConf.setNumRe ...
hadoop涉及输出文本的默认输出编码统一用没有BOM的UTF-8的形式,但是对于中文的输出window系统默认的是GBK,有些格式文件例如CS ...
请问各位 hadoop balancer 的问题 问题点就是平衡没有达到预计的目标,预计要移动600多G的数据,可是才一开始就因为5轮没有移 ...
本帖最后由 pig2 于 2014-4-11 16:28 编辑 一个文件200M,里面每行含有ip,城市,位置的信息,如155.120.123.2 北京 北京大学1 ...
在请教一个问题 ,hive正在执行 怎么停掉呢? 把hive语句写在脚本里面执行的,然后发现脚本有问题,然后发现脚本有问题,想停掉 ...
刚开始入门,问个初级问题:windows和linux的hadoop能相互访问吗?
报错如下: 运行失败:
ssh slave1 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 想请教下 为什么会报“Permission denied, please try again” ...
job.setGroupingComparatorClass(FirstComparator.class);job.setSortComparatorClass(TextIntComparator.class);这2句话什么意 ...
我现在目录中有30000个文件,我想给它平均分配到10个目录中 请问有没有什么办法啊?
这是搭建一个完整的hadoop集群会碰到的一系列问题,会陆续提问。请各位大神不吝指教。谢谢! 项目情况: 每天新增1千万条记 ...
安装好了ganglia,打开浏览器发现图像数据都是空的,如下:, 分别点击红色圆圈标注的地方,会跳转到一个空白页面,问一个是哪 ...
据说,只是据说.......阿里云可以当成普通电脑一样来使用。 我对这种说法很感兴趣,目的是希望能够得到10 - 20台(重点:免费 ...
package wordcount; import java.io.IOException; import java.util.StringTokenizer; import org.apache.hadoop.fs.Path ...
请教,我用了如下两种方法,为什么还是出现这种启动不了呢如图: 我用的方法:一.删除hadoop的临时文件,/tmp下的所有文件,再 ...
请教一下R软件与hadoop的联合方式,希望能够有详细的教程
有的同学去面试,碰到了这个问题。谈谈org.apache.hadoop.mapreduce.Mapper和org.apache.hadoop.mapred.Mapper的区别和用途。 ...
namenode一旦宕机,hadoop集群就会挂掉,如何解决namenode的风险
有几千万条数据,一个句子一条数据, 根据输入的一句话来查询取得数据, 只根据匹配度来查询,不需要考虑语义, 我们应该用文 ...
java.lang.UnsupportedClassVersionError: com/WordCount : Unsupported major.minor version 51.0 这个问题怎么解决呢? ...
这里引用孔子的话:学而不思则罔思而不学则殆:只读书而不肯动脑筋思考,就会感到迷惑而无所适从;只是一味空想而不肯读书,便会 ...
在hive执行时留下的蛛丝马迹:Failed with exception org.apache.hadoop.hdfs.server.namenode.NotReplicatedYetException: Not ...
关于heapsize的问题。由于集群机器的内存的配置不一致,每台机器可以单独配置吗?
死机了3个节点,然后重新开机,启动dfs和map之后,连上之后发现在这些节点上占用的存储空间比之前少了很多!!!有这方面经历的 ...
在对hbase表进行scan操作时,有时候程序会输出下面的信息:(程序运行在hadoop集群外的机器上,etc/hosts文件中对hadoop集 ...
需要装一台客户端机器,机器需要安装哪些内容: 配置ssh? 装hadoop,改配置文件?? hive? sqoop? 修改.bashrc文件?? ...
我在笔记本(i7CPU,6G内存)上开了2台ubuntu虚拟机(1核2核心,1G内存)和本机组成3台集群环境,现在的问题是,在虚拟机内部执行 ...
oracle作为源数据库时,表存在分区。通过sqoop导入时,对这个分区时如何处理的!!???
这个是什么原因?
本版积分规则 发表帖子
查看 »