请注意,Spark 3 通常使用 Scala 2.12 预先构建,而 Spark 3.2+ 提供使用 Scala 2.13 预先构建的额外发行版。
Spark 工件 托管在 Maven Central 中。您可以使用以下坐标添加 Maven 依赖项
groupId: org.apache.spark
artifactId: spark-core_2.12
version: 3.5.1
PySpark 现在在 pypi 中可用。要安装,只需运行 pip install pyspark
。
Spark Docker 容器镜像可从 DockerHub 获取,这些镜像包含非 ASF 软件,可能受不同的许可条款约束。
随着每个开发流的新 Spark 版本发布,以前的版本将被存档,但它们仍然可以在 Spark 版本存档 中获取。
注意:以前的 Spark 版本可能会受到安全问题的影响。在决定使用之前,请参阅 安全 页面,了解可能影响您下载版本的已知问题列表。