在哪里可以找到有关Spark内部零件的官方详细说明

Question

我正在尝试详细学习Spark。 他们的许多网站都在详细解释Spark。喜欢这些链接：

1. Spark stages
2. DAG in spark

我的疑问是，spark official website上所有这些事情在何处都有相似或更详细的解释？

Answer 1

如果您还没有研究过这些，则可能要从基础开始：

• 原始RDD论文：https://www2.eecs.berkeley.edu/Pubs/TechRpts/2011/EECS-2011-82.pdf
• 火花SQL /数据框：https://amplab.cs.berkeley.edu/wp-content/uploads/2015/03/SparkSQLSigmod2015.pdf

更新：

有关该主题的更多类似出版物，请参见：

• https://spark.apache.org/research.html
• https://spark.apache.org/history.html

此外，如果您更深入地研究https://spark.apache.org/documentation.html（例如，Meetup Talk视频：“ Matei Zaharia的Spark内部内容简介（幻灯片），2012年12月，雅虎，雅虎），您可能会发现其他格式的有趣内容。 -18“）