Spark 2.2.1 版本发布

Spark 2.2.1 是一个维护版本,包含稳定性修复。 此版本基于 Spark 的 branch-2.2 维护分支。 我们强烈建议所有 2.2.x 用户升级到此稳定版本。

您可以查阅 JIRA 以获取详细更改

行为变更

  • Core 和 SQL
    • SPARK-22472:为顶级原始类型添加了 null 检查。 在此版本之前,对于具有顶级原始类型的数据集,并且它具有空值,它可能会返回一些意想不到的结果。 例如,假设我们有一个模式为 <a: Int> 的 parquet 文件,我们将其读入 Scala Int。 如果列 a 有空值,当应用转换时,可能会返回一些意想不到的值。

我们要感谢所有社区成员为该版本贡献补丁。


Spark 新闻存档

最新新闻

存档