Spark 2.4.2 版本发布

Spark 2.4.2 是一个维护版本，包含稳定性修复。此版本基于 Spark 的 branch-2.4 维护分支。我们强烈建议所有 2.4 用户升级到这个稳定版本。

请注意，从 2.4.1 开始，Scala 2.11 的支持已被弃用。从 2.4.2 开始，预构建的便捷二进制文件是为 Scala 2.12 编译的。 Spark 仍然在 Maven Central 中为 2.11 和 2.12 交叉发布，并且可以从源代码构建为 2.11。

值得注意的更改

  • [SPARK-27419]: 当将 spark.executor.heartbeatInterval 设置为小于 1 秒的值时，它将始终失败，因为该值将被转换为 0，并且心跳将始终超时并最终杀死执行器。
  • 还原 [SPARK-25250]：它可能导致作业永远挂起，并在 2.4.2 中被还原。

您可以查阅 JIRA 了解详细的更改。

我们要感谢所有社区成员为本次发布贡献补丁。


Spark 新闻存档

最新新闻

存档