spark sql和hive on spark的区别

查看数: 23750 | 评论数: 4 | 收藏 1

关灯 | 提示：支持键盘翻页<-左右->

发布时间: 2018-4-29 10:37

刚入门，我们搞不清楚spark sql和hive on spark有什么区别。 spark sql是sql语句 hive on spark也是sql语句，这二者有什么区别？其实最大的区别是spark sql用的是spark 引擎，hive on spark是hive借用spark的 ...

desehawk 发表于 2018-6-7 19:00:29

yongjian3311 发表于 2018-6-7 09:35
现在的情况是hive引擎贼慢但是大数据量执行不报错，spark在大数据量和资源有限的情况下会报错或者数据跑出 ...

spark比较吃内存，要求高一些。配置合理，应该没问题的。

yongjian3311 发表于 2018-6-7 09:35:12

现在的情况是hive引擎贼慢但是大数据量执行不报错，spark在大数据量和资源有限的情况下会报错或者数据跑出错乱的结果

shenjp 发表于 2018-5-2 09:07:56

谢谢分享，正在学习这方面的知识

图文精华