about云2016年每周经典回顾汇总【第五篇】

about云每周经典回顾汇总

about云2015年每周经典回顾汇【第二篇】


about云2016年每周经典回顾汇总【第三篇】

about云2016年每周经典回顾汇总【第四篇】


2017年about云01月第02周经典帖子总结


Spark架构简明分析
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20781

1.  RDD有哪些特性？

2.  如何理解Application、Job、Stage、TaskSet以及Task？

3.  Spark如何实现可插拔式的资源管理模块？

4.  Spark如何实现RPC通信模块？

5.  启动Standalone集群的流程是怎样的？

6.  Spark集群计算时涉及到哪些核心组件？这些核心组件是如何交互的？

7.  Spark Block模块的作用是什么？如何实现的？

about云日志分析项目准备：Hadoop2.x集群安装及常见配置项说明
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20793
1.hadoop安装有哪些配置文件？
2.配置文件各自配置了哪些信息？总结它们的作用是什么？
3.配置文件都配置了哪些信息？


about云日志分析项目准备：scala安装
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20770
1.如何更新解压包的权限？
2.如何配置环境变量？
3.如何验证Scala是否安装成功？




在Kafka和ElasticSearch的框架上，Linked日志系统是如何演进的
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20767
1、为什么要做日志分析系统？
2、用ES和Kafka做日志分析遇到的问题有哪些？
3、如何确定日志分析系统的基本需求？
4、LinkedIn日志系统经过了哪些演进过程？
5、日志系统实施时应注意有哪些内容？


Spring中spring-data-redis的使用
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20755
1、什么是spring-data-redis？
2、spring-data-redis依赖哪些jar？
3、如何使用spring-data-redis？


资源：

Java并发编程的艺术
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20786


Kafka Cluster优化两三事
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20768


Spark Summit Europe 2016视频分享
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20765


实战Elasticsearch、Logstash、Kibana：分布式大数据搜索与日志挖掘及可视
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20761


基于数据库的分布式计算系统
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20748



问答：

求助!!! 关于Hbase region
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20762


关于hbase二级索引的理解，请指导。
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20760



2017年about云01月第01周经典帖子总结


about云日志分析项目准备高可靠centos7安装jdk1.8【rpm】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20740
1.rpm与tar包有什么区别？
2.如何rpm包？
3.如何为rpm指定路径安装？


使用Flume+Logstash+Kafka+Spark Streaming进行实时日志处理分析【公安大数据】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20705

1.公安实时运维平台整体架构是怎样的?

2.Logstash有哪些作用？

3.Spark处理分析分为哪几步？

ElasticSearch与hbase进行整合的一个搜索案例
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20731
1.  ElasticSearch和Hbase分别有有什么特点呢？
2.  如何安装一个ElasticSearch集群？
3.  如何导入索引？
4.  如何实现搜素？
5.  如何使用使用spring控制层处理？


ETL工具Kettle初学者踩坑总结
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20743
1.  如何连接资源库？
2.  如何连接数据库？
3.  如何解决数据库连接更新不及时问题？
4.  如何解决Unable to read file错误？
5.  如何解决tinyint类型数据丢失问题？


程序员为什么写博客
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20738


Apache Ignite介绍及与各种大数据技术【spark，redis，hadoop】的关系和对比
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20720
1.Apache Ignite 是什么？
2.Ignite和Hadoop以及Spark是什么关系？
3.Ignite与其它类似技术相比有哪些特点？


Spark机器学习入门·编程(scala/java/python)实现分析商店购买记录
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20707
1.Scala是如何实现分析商店购买记录的？
2.对比Scala程序与Java程序实现差别？
3.三种语言各有什么特点？


Spark 2.1.0新特性
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20704

1.Spark 2.1.0有哪些主要改动?

2.Spark 2.1.0的性能和稳定性有哪些改进？

日志数据从kafka到hive是如何实现的
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20701
1.数据从kafka到hive的背景是什么？
2.日志数据为何不能直接发送给hive？
3.如何将数据从kafka读到hive中？


spark-jobserver入门教程
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20686

1. spark-jobserver有哪些特性？

2. 如何安装spark-jobserver？

3. 如何使用跟job相关的一些resful？

4. 如何使用跟context相关的一些resful？

5. 如何对spark-jobserver做一些配置？

ELK结合Spark构建高可用架构及监控spark集群
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20679
1. ELK 系统是如何进行架构的？
2. 为什么ELK 在 Spark 集群中是高可用性构架？
3. ELK 可以监控 Spark 集群的哪些性能？
4. ELK 可以监控 Spark 集群的哪些作业？



大数据架构师必读：医药企业大数据应用案例
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20669
1、IT系统信息化平台涉及内容有什么？
2、数据集成架构模型包括哪些部分？
3、业务系统部署实现功能有什么？
4、数据仓库建设应考虑的内容有哪些？
5、未来大数据应用如何扩展？


kafka0.9.0及0.10.0配置属性整理包括borker、Producer、Consumer配置【收藏版】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20665
1.borker包含哪些属性？
2.Producer包含哪些属性？
3.Consumer如何配置？




资源：
Java并发程序设计教程【阿里巴巴】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20673



Spark学习总结---入门
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20710




hive要领【英文】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20722


Ceph 分布式存储实践指 分布式存储实践指 分布式存储实践指 分布式存储实践指 南
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20721



Apache-Ignite——新一代数据库缓存系统-论文
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20733


学习Cloudera Impala
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20732


R语言常用统计方法实现
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20716


分布式算法【英文书籍899页】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20692


Java 7并发编程实战手册
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20682



问答：

Spark新人关于Spark Stream应用的一些疑问，望大神帮忙解答，不胜感激～
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20702


安装失败，无法进行身份验证
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20695

很好的资料 学习了