本帖最后由 pig2 于 2014-8-15 23:00 编辑 问题导读 1.spark on yarn能否查看运行日志？ 2.spark on yarn需求该如何定义与查 ...

howtodown 2014-8-15 1 23637

本帖最后由 xioaxu790 于 2014-8-13 07:43 编辑 问题导读 1、spark大致工作流程是什么？ 2、Spark的运行模式取决于什么？ 3 ...

xioaxu790 2014-8-13 0 10524

问题导读： 1.Spark SQL各个模块的实现情况？ 2.Spark SQL代码结构？ 3.Spark SQL执行流程？ 在2014年7月1日 ...

sunshine_junge 2014-8-5 0 11236

本帖最后由 xioaxu790 于 2014-7-31 19:31 编辑 问题导读 1、如何提交TaskSet给TaskScheduler执行？ 2、BlockManager如何通 ...

xioaxu790 2014-7-31 0 13025

本帖最后由 xioaxu790 于 2014-7-31 19:17 编辑 问题导读 1、RDD如何初始化参数？ 2、什么是getPartitions操作和compute操 ...

xioaxu790 2014-7-31 0 31219

本帖最后由 pig2 于 2014-7-30 19:58 编辑 问题导读 1、什么是options参数？ 2、使用什么命令来启动所有的cf组件？ ...

xioaxu790 2014-7-30 1 8837

问题导读 1、Spark SQL多了一个什么重要的功能？ 2、Spark SQ支持哪些关系型查询表达式？ Spark1.0出来了，变化还 ...

xioaxu790 2014-7-30 0 15133

问题导读 1、Spark支持哪些共享变量？ 2、如何操作累加器？ Spark的第二个抽象，是并行计算中使用的共享变量。一般来 ...

xioaxu790 2014-7-28 0 8911

问题导读 1、storage模块分为哪两个层面？ 2、通信层中类结构所扮演的不同角色关系是什么？ 3、如何交互存取block？ ...

xioaxu790 2014-7-28 0 7095

问题导读 1、Spark更加有效率运行的原理是什么？ 2、如何理解转换、动作？ 分布式数据集支持两种操作： 转换(transf ...

xioaxu790 2014-7-27 0 13244

本帖最后由 pig2 于 2015-3-19 22:23 编辑 问题导读 1、RDD程序的调试工具是什么？ 2、如何学习可迭代的机器应用？ ...

xioaxu790 2014-7-26 0 18465

本帖最后由 pig2 于 2015-3-19 22:24 编辑 问题导读 1、什么是Pregel容错？ 2、如何实现RDD的在迭代计算？ 摘要 本 ...

xioaxu790 2014-7-25 0 19645

本帖最后由 pig2 于 2014-7-22 10:06 编辑 问题导读 1、内存不足，怎么解决？ 2、Maven无法下载mqtt-client-0.4.0.pom，怎么 ...

xioaxu790 2014-7-22 0 21932

本帖最后由 xioaxu790 于 2014-7-20 18:34 编辑 问题导读 1、SQL on Hadoop的未来是什么？ 2、Spark和Impala的发展怎样，代 ...

xioaxu790 2014-7-20 0 13124

本帖最后由 xioaxu790 于 2014-7-18 19:16 编辑 问题导读 1、如何理解SQL Core？ 2、RDD支持的第三方格式有哪些？ 3、SQLCo ...

xioaxu790 2014-7-18 0 9481

问题导读：1. Spark vs MapReduce 有哪些优势？2.Spark有哪些成功应用案例？3.与Hive相比，Shark有哪些特性？ Spark ...

sunshine_junge 2014-7-18 0 9621

本帖最后由 xioaxu790 于 2014-7-18 19:24 编辑 问题导读 1、什么是Catalyst？ 2、对Hive的兼容支持将转移到什么上？ 3、Tr ...

xioaxu790 2014-7-18 0 9623

问题导读： 1.如何搭建spark二次开发环境？ 扩展： 2.spark开发环境与hbase、hadoop开发环境搭建有什么相同之处？ 附上： h ...

hyj 2014-7-16 1 30299

本帖最后由 xioaxu790 于 2014-7-14 14:27 编辑 问题导读 1、如何配置Scala？ 2、如何配置Shark Hive Spark Hadoop2 单机运 ...

xioaxu790 2014-7-14 0 11643

本帖最后由 xioaxu790 于 2014-7-14 14:29 编辑 问题导读 1、shark和hadoop2整合，有什么要求？ 2、需要shark0.9.0 的什么 ...

xioaxu790 2014-7-14 0 9851

本帖最后由 pig2 于 2014-7-13 01:20 编辑 问题导读： 1.spark目前支持哪几种语言？ 2.三种语言那种语言更适合开发spark？ ...

pig2 2014-7-12 0 12686

问题导读： 1.python开发Spark Application拥有哪些优势？ 2.sogou日志数据分析python如何实现的？ 3.Spark1.0.0的Python程 ...

pig2 2014-7-12 0 34003

问题导读： 1.Spark编译方式有几种？ 2.如何使用maven编译？ 3.如何生成spark部署包？ Spark1.0.0的源码编译 ...

pig2 2014-7-12 0 12871

问题导读： 1.spark应用程序包含哪两个部分？ 2.driver部分的作用是什么？ 3.executor部分的作用是什么？ 4.executor对 ...

pig2 2014-7-12 0 15894

本帖最后由 pig2 于 2014-7-11 16:20 编辑 问题导读： 1.Shark Hive Spark Hadoop2 单机运行环境如何搭建? 2.如何启动测试s ...

sunshine_junge 2014-7-11 0 8138

问题导读： 1.shark和hadoop2 进行整合需要经过哪些步骤？ 2.shark安装之前需要安装哪些软件？ 3.shark与hadoop是如何整合的 ...

sunshine_junge 2014-7-11 0 8292

问题导读： 1.本地安装，shark如何配置？ 2.一些常见错误解决方案？ 1.下载scala wget http:// ...

sunshine_junge 2014-7-11 0 10451

问题导读： 1.shark为什么速度快？ 2.如何部署shark? 3.如何编译？ Shark简介 Shark即Hive on Sp ...

sunshine_junge 2014-7-11 0 10477

问题导读： 1.sogou日志数据分析scala是如何实现的？ 2.客户端如何运行spark命令？ 3.通过下面例子，对Scala的认识是什么？ ...

pig2 2014-7-11 0 15048