Spark大型集群上的快速和通用数据处理架构pdf 基于大型集群的快速通用数据处理架构,为了实现上述的各种特性,我们通过简单的扩展 MapReduce,为其增加了数据共享原语,也就是所谓的弹性分布式数据集(RDDs)。我们发现,这样的扩展足以能够有效地覆盖大部分作业的需求。在开源的 Spark 系统中我们实现了 RDDs,同时使用了模拟测试程序和真实