上QQ阅读APP看书,第一时间看更新
1.3 一站式数据分析
虽然“一站式”的概念不是 Spark 独有的,但这是 Spark 设计哲学的核心之一。2016 年 11 月,美国计算机学会(Association for Computing Machinery,ACM)认可了 Spark,并将久负盛名的 ACM 奖授予了 Spark 的原创者所写的论文。这篇论文将 Spark 描述为“一站式大数据处理引擎”。该论文指出,Spark 组件所组成的一站式软件栈替代了 Storm、Impala、Dremel、Pregel 等各种批处理、图计算、流处理、SQL 查询引擎,用单一的快速分布式引擎处理各种场景的工作负载。