Spark 发布 2.2.1

Spark 2.2.1 是一个维护版本,包含稳定性修复。此版本基于 Spark 的 branch-2.2 维护分支。我们强烈建议所有 2.2.x 用户升级到此稳定版本。

您可以查阅 JIRA 以获取详细更改

行为变更

  • 核心与 SQL
    • SPARK-22472:为顶级原始类型添加了空值检查。在此版本之前,对于包含顶级原始类型且具有空值的数据集,可能会返回一些意外结果。例如,假设我们有一个 schema 为 <a: Int> 的 parquet 文件,并将其读取为 Scala Int。如果列 a 包含空值,则在应用转换时可能会返回某些意外值。

我们在此感谢所有为本次发布贡献补丁的社区成员。


Spark 新闻存档

最新新闻

存档