分享

about云日志分析项目约定

pig2 发表于 2016-12-22 18:53:37 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 0 1305


1.统一的环境
centos版本为centos7更多可参考
about云日志分析项目准备1:Linux操作系统选择centos
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20477



2.集群ip地址统一
统一ip,环境都保持一致。
master ip:192.168.1.10
slave1 ip:192.168.1.20
slave2 ip:192.168.1.30
统一账户:aboutyun密码:aboutyun


3.集群选择版本
选择下面版本:
hadoop 2.6.5 + spark 1.6.3 + kafka 0.9.0.1 + flume 1.6.0 + hive 1.2.1 + scala 2.11.8
特点:稳定性比较好,开发可能会快一些,后期考虑在升级,因此采用此方案。
更多可参考
about云日志分析项目准备5:hadoop,spark,kafka,flume,hive等工具的版本选择
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20587


4.为确保项目文档有序
对于相似文档采用分支的方式
比如同为集群搭建,下面文章中细写了hadoop集群的搭建
~~~~~~~~~~~~~~~~~~~~~~~~
about云日志分析项目准备6-1:Hadoop、Spark集群搭建
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20620
~~~~~~~~~~~~~~~~~~~~~~~~
如果文档表达的内容相同则为6-2同时对于写上上一篇文章标题及连接
###############


5.对于群组中代码乱码处理
由于在群组中出现br,空格等。
对于代码一律放到下面标签中
【code】【/code】
后面如有问题,大家可在补充









没找到任何评论,期待你打破沉寂

关闭

推荐上一条 /2 下一条