2017年about云02月第04周经典帖子总结

Spark Sql系统入门4：spark应用程序中使用spark sql
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21046
1.你认为如何初始化spark sql？
2.不同的语言，实现方式都是什么？
3.spark sql语句如何实现在应用程序中使用？


透过源码分析Spark Application Web UI的Stages 信息
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21071
1.pendingTasksForExecutor是怎么来的，什么含义？
2.taskSetManager 的 locality levels是否包含 PROCESS_LOCAL?
3.sched.isExecutorAlive(_)干了什么？
4.taskSetManager 的 locality levels是否包含 NODE_LOCAL?
5.task的计算节点和task 的输入数据的节点位置关系包含哪些类型？


大数据时代的结构化存储—HBase在阿里的应用实践
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21057
1. Hbase的能力特点是什么？
2. 阿里哪些业务逻辑使用HBase？
3. HBase如何建设HA模式？
4. 数据传输管道设施是什么样的？
5. HBase 的性能和成本概况如何？


3个有用的TensorFlow On Spark 开源项目分析
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21058
1. 什么是TensorFlow？
2. TensorFlow On Spark出现的意义在于什么？
3. Yahoo公司开源的TensorFlowOnSpark有什么特点？
4. databricks 公司开源的的TensorFrames有什么特点？
5. github adatao团队开源的tensorspark有什么特点？


阿里巴巴搜索中为何使用Flink及如何实践介绍
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21047
1、Flink在阿里巴巴搜索中如何应用？
2、如何选择一个框架来解决问题？
3、Blink是什么?
4、阿里巴巴的Flink未来计划是什么?


Sqoop1和Sqoop2的对比
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21035
1、Sqoop什么用途？
2、sqoop2比sqoop1有哪些改进？
3、sqoop2和sqoop1功能性上有哪些差异？
4、sqoop1和sqoop2框架有哪些差异？
5、sqoop1与sqoop2有哪些优缺点？
6、sqoop1与sqoop2差异有哪些？
7、sqoop1是如何部署、使用的？
8、sqoop2是如何部署、使用的？
9、Sqoop2有哪些核心概念？



Spark Sql系统入门3：spark sql运行计划精简
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21032
1.hive/console的作用是什么？
2.hive/console如何安装？
3.hive/console的原理是什么？
4.通过什么命令可以查看执行计划？
5.如何查看RDD的转换过程？



资源：
大数据集群【hadoop、hbase、spark、hive，zookeeper、storm等】故障排除之端口详解
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21051


Hadoop2.x 让你真正明白yarn
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21038


flume入门英文文档
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21070


Spark Streaming入门及相关案例介绍
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21063


基于OpenStack的公有云平台设计
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21050



问答：
想做大数据研发方面的工作，该怎么准备面试
http://www.aboutyun.com/forum.php?mod=viewthread&tid=21066

感谢楼主的总结