hadoop mapreduce数据去重 2015-10-10

假设我们有下面两个文件，需要把重复的数据去除。 file0     2012-3-1 a   2012-3-2 b   2012-3-3 c   2012-3 ...

(1989)次阅读|(0)个评论

HBase 使用场景和成功案例 2015-10-09

典型互联网搜索问题： BigTable 发明的原因 搜索是一个定位你所关心的信息的行为：例如，搜索一本书的页码，其中含有你想读的主题，或者网页，其中含有你 ...

(836)次阅读|(0)个评论

搭建hadoop集群环境 2015-10-08

本文通过在vmware workstation上建立三台虚拟机来搭建hadoop集群环境，其中一台作为namenode，两台作为datanode。 一、安装vmware workstation（10.0.0） ...

(1)次阅读|(0)个评论

查看更多