spark1.02怎么实现读取hbase的数据 2015-03-31

请问spark 怎么实现读取hbase的数据并且展示出来 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; ...

(2112)次阅读|(0)个评论

Hbase数据导入，直接用mapreduce的方式 2014-08-25

第一种直接读取文件，然后用 mapreduce 的方式导入。测试数据 370 万，大小 30G   用时 284 分钟，这种方式数据丢失很严重，丢了将近60万的数据 ...

(1051)次阅读|(0)个评论

hbase 集群搭建 2014-07-14

我用的是cdh4.5版本： 配置文件：$HBASE_HOME/conf/hbase-env.sh export JAVA_HOME=$JAVA_HOME export JAVA_HOME=/home/hadoop/jdk1.7.0_51 export HBASE_CLASSP ...

(828)次阅读|(0)个评论

hadoop 8088 看不到mapreduce 任务的执行状态 2014-07-14

进到8088页面后，怎么看不到mapreudce的执行状态，有哪里需要配置的

(3753)次阅读|(1)个评论

MapReuce 怎么实现去掉文件重复的内容 2014-07-09

文件数据格式： Name,CardNo,Descriot,CtfTp,CtfId,Gender,Birthday,Address 彬,,,ID,xxxxx21059,M,20101001,,,F,,CHN,,,,,,,,139,19:46:02,4000000 珊,,,ID ...

(1026)次阅读|(2)个评论

读取hdfs上的文件 ，并直接写入hbase数据库NoClassDefFoundError: org/apache/hadoop/ ... 2014-07-04

今天在导hdfs上的数据到 hbase数据库时出现错误提示：               Exception in th ...

(1984)次阅读|(1)个评论

查看更多