Spark有什么需要改进的问题和不足

如题，目前在做毕业设计。导师想让我对Spark进行改进写写论文。求指教！

主要还是内存问题
基于JVM的大数据程序都很难避开资源管理或者内存管理这个问题

目前Spark主要存在哪些缺点？
(a) JVM的内存overhead太大，1G的数据通常需要消耗5G的内存 -> Project Tungsten 正试图解决这个问题；
(b) 不同的spark app之间缺乏有效的共享内存机制 -> Project Tachyon 在试图引入分布式的内存管理，这样不同的spark app可以共享缓存的数据














知乎作者：Hugo Yang

如果说优点很多，当然缺点也很多。只要你觉得麻烦，他就有缺点。
比如，最明显的当然是内存需要太多，花钱太多。
还有部署麻烦，能否一键安装。
运行过程中不要老是oom。
能否自动调优等等