数据分析的项目

大家有没有做过每个产品的数据分析项目，从几个电商网站抓取数据然后分析，有没有哪位高人做过？指点指点 需要用到哪些技术

这个跟日志分析是一样的。整体流程

首先数据的抓取，可以通过solr，数据的传递可以通过flume，数据持久可以放到hbase及hive中，数据分析可以使用hive。

跟about云的日志分析项目有些类似
about云分析discuz论坛apache日志hadoop大数据项目：需求分析说明书

更多内容：
http://www.aboutyun.com/forum-156-1.html