Spark 1.2.2 版本发布

Spark 1.2.2 是一个维护版本,包含稳定性修复。 此版本基于 Spark 的 branch-1.2 维护分支。 我们建议所有 1.2.1 用户升级到此稳定版本。 此版本的贡献来自 39 位开发者。

要下载 Spark 1.2.2,请访问下载页面。

修复

Spark 1.2.2 包含多个组件中的错误修复。 下面重点介绍了一些更重要的修复。 您可以访问 Spark 问题跟踪器 以获取完整的修复列表。

Spark Core

  • Netty shuffle 中的线程安全问题 (SPARK-6578)
  • JobProgressListener 中的内存泄漏 (SPARK-5967)
  • 无法在 YARN 2.5.0 及更高版本上启动 (SPARK-4267)
  • 安全模式下的 YARN 辅助 shuffle 问题 (SPARK-5655)

PySpark

  • collect 操作期间作业挂起 (SPARK-6667)
  • Zip 因序列化器错误而失败 (SPARK-5973)
  • 使用带有 PySpark 的 Spark SQL 时出现内存泄漏 (SPARK-6055)
  • 使用大型广播变量时挂起 (SPARK-5363)

贡献者

以下开发者为该版本做出了贡献

  • Andrew Or – Core 和 YARN 中的 Bug 修复
  • Andrew Rowson – YARN 中的 Bug 修复
  • Anselme Vignon – SQL 中的 Bug 修复
  • Brennon York – GraphX 中的 Bug 修复
  • Cheng Hao – Core 中的 Bug 修复
  • Cheolsoo Park – YARN 中的 Bug 修复
  • Davies Liu – PySpark 中的改进;Streaming、Core、SQL 和 PySpark 中的 Bug 修复;Core 和 PySpark 中的文档
  • Emre Sevinc – Core 和 MLlib 中的文档;Core 中的改进
  • Gen TANG – EC2 中的 Bug 修复
  • Hari Shreedharan – Streaming 中的 Bug 修复
  • Hung Lin – 调度器中的 Bug 修复
  • Iulian Dragos – Streaming 中的测试
  • Jacek Lewandowski – Core 中的 Bug 修复
  • Jesper Lundgren – Streaming 中的 Bug 修复
  • Josh Rosen – Java API、Streaming、tests 和 Core 中的 Bug 修复
  • Kashish Jain – YARN 中的 Bug 修复
  • Kay Ousterhout – Core 和 SQL 中的 Bug 修复
  • Kousuke Saruta – Streaming 和 tests 中的改进
  • Li Zhihui – Core 中的文档
  • Manoj Kumar – MLlib 中的改进
  • Matt Cheah – Core 中的 Bug 修复
  • Michael Nazario – PySpark 中的 Bug 修复
  • Mingyu Kim – Core 中的 Bug 修复
  • Nathan McCarthy – Core 中的 Bug 修复
  • Nicholas Chammas – EC2 中的 Bug 修复
  • Peng Xu – Core 中的文档
  • Reynold Xin – Core 中的 Bug 修复
  • Ryan Williams – Core 中的改进
  • Sean Owen – EC2 中的改进;Core、tests、YARN、Streaming、scheduler 和 Web UI 中的 Bug 修复
  • Shixiong Zhu – Shuffle 中的改进
  • Tathagata Das – Streaming 和 Web UI 中的 Bug 修复
  • Venkata Ramana Gollamudi – Core 中的改进
  • Vladimir Grigor – EC2 中的 Bug 修复
  • Wang Tao – Core 中的 Bug 修复
  • Winston Chen – PySpark 中的 Bug 修复
  • Yin Huai – SQL 中的 Bug 修复
  • Yuhao Yang – MLlib 中的 Bug 修复
  • Zhan Zhang – Core 中的 Bug 修复
  • Zhang, Liye – Core 中的 Bug 修复

感谢所有做出贡献的人!


Spark 新闻存档

最新新闻

存档