利用java_api+hbase写的userdao 2014-11-02

1、 HBaseIA.TwitBase.model package HBaseIA.TwitBase.model; public abstract class User {   public String user;   public String nam ...

(1138)次阅读|(0)个评论

hbase学习_java操作 2014-11-02

翻译自HBase_in_action 2.1.3建立连接  Configuration conf=new HBaseConfiguration.create();          conf.set("hbas ...

(1207)次阅读|(0)个评论

利用hadoop分析复杂的数据集(Tomcat developer mailing list archives) 2014-10-29

在本文中，将对Tomcat developer mailing list archives的数据中每个人发送的邮件的回复数量进行统计，因为在原数据中所需要得到的值在不同的行，因此需要自定应 ...

(1322)次阅读|(0)个评论

hadoop中counter的使用 2014-10-27

1、首先定义一个枚举类型 public static enum LOG_PROCESSOR_COUNTER {          BAD_RECORDS   }; 2、在mapper或者redu ...

(1116)次阅读|(0)个评论

添加mapreduce的job之间的依赖 2014-10-27

1、创建第一个job Job job1 = new Job(getConf(), "log-grep"); job1.setJarByClass(RegexMapper.class); job1.setMapperClass(RegexMapper.class); FileInp ...

(1288)次阅读|(0)个评论

通过复用java 虚拟机提高性能 2014-10-20

当 mapred.job. reuse.jvm.num.tasks=-1的时候，表示使用同一个jvm >bin/hadoop jar hadoop-examples-1.0.0.jar wordcount –D mapred.job. reuse.jvm.num ...

(992)次阅读|(0)个评论

查看更多