Spark 4.0 预览版发布

为了使即将发布的 Spark 4.0 版本能够进行大规模的社区测试,Apache Spark 社区发布了 Spark 4.0 的预览版。此预览版在 API 和功能方面均不稳定,但旨在让社区尽早接触到将成为 Spark 4.0 的代码。如果您想测试此版本,请下载它,并通过邮件列表或 JIRA 发送反馈。

Spark 4.0 中增加了许多令人兴奋的新功能,包括默认启用 ANSI 模式、Python 数据源、多态 Python UDTF、字符串排序支持、新的 VARIANT 数据类型、流式状态存储数据源、结构化日志记录、默认使用 Java 17,以及更多功能。

我们要感谢我们的贡献者和用户对本次发布的贡献和早期反馈。没有你们,这个版本是不可能实现的。

要下载 Spark 4.0.0-preview1,请前往下载页面。它也可在 PyPI 中获取,版本名为 “4.0.0.dev1”。


Spark 新闻归档

最新新闻

归档