Spark 发布 1.2.2

Spark 1.2.2 是一个包含稳定性修复的维护版本。此版本基于 Spark 的 branch-1.2 维护分支。我们建议所有 1.2.1 用户升级到此稳定版本。共有 39 位开发者为此版本做出了贡献。

要下载 Spark 1.2.2,请访问下载页面。

修复

Spark 1.2.2 包含多个组件的错误修复。下面重点介绍了一些更重要的修复。您可以访问 Spark 问题追踪器,查看完整的修复列表。

Spark Core

  • Netty shuffle 中的线程安全问题 (SPARK-6578)
  • JobProgressListener 中的内存泄漏 (SPARK-5967)
  • 无法在 YARN 2.5.0 及更高版本上启动 (SPARK-4267)
  • 安全模式下的 YARN 辅助 shuffle 问题 (SPARK-5655)

PySpark

贡献者

以下开发者为此版本做出了贡献

  • Andrew Or – Core 和 YARN 中的错误修复
  • Andrew Rowson – YARN 中的错误修复
  • Anselme Vignon – SQL 中的错误修复
  • Brennon York – GraphX 中的错误修复
  • 程浩 (Cheng Hao) – Core 中的错误修复
  • Cheolsoo Park – YARN 中的错误修复
  • Davies Liu – PySpark 改进;Streaming、Core、SQL 和 PySpark 中的错误修复;Core 和 PySpark 中的文档
  • Emre Sevinc – Core 和 MLlib 中的文档;Core 改进
  • Gen TANG – EC2 中的错误修复
  • Hari Shreedharan – Streaming 中的错误修复
  • Hung Lin – 调度器中的错误修复
  • Iulian Dragos – Streaming 测试
  • Jacek Lewandowski – Core 中的错误修复
  • Jesper Lundgren – Streaming 中的错误修复
  • Josh Rosen – Java API、Streaming、测试和 Core 中的错误修复
  • Kashish Jain – YARN 中的错误修复
  • Kay Ousterhout – Core 和 SQL 中的错误修复
  • Kousuke Saruta – Streaming 和测试改进
  • 李智慧 (Li Zhihui) – Core 中的文档
  • Manoj Kumar – MLlib 改进
  • Matt Cheah – Core 中的错误修复
  • Michael Nazario – PySpark 中的错误修复
  • Mingyu Kim – Core 中的错误修复
  • Nathan McCarthy – Core 中的错误修复
  • Nicholas Chammas – EC2 中的错误修复
  • 彭旭 (Peng Xu) – Core 中的文档
  • Reynold Xin – Core 中的错误修复
  • Ryan Williams – Core 改进
  • Sean Owen – EC2 改进;Core、测试、YARN、Streaming、调度器和 Web UI 中的错误修复
  • 朱世雄 (Shixiong Zhu) – Shuffle 改进
  • Tathagata Das – Streaming 和 Web UI 中的错误修复
  • Venkata Ramana Gollamudi – Core 改进
  • Vladimir Grigor – EC2 中的错误修复
  • 王涛 (Wang Tao) – Core 中的错误修复
  • Winston Chen – PySpark 中的错误修复
  • 殷怀 (Yin Huai) – SQL 中的错误修复
  • 杨宇浩 (Yuhao Yang) – MLlib 中的错误修复
  • 张占 (Zhan Zhang) – Core 中的错误修复
  • 张立业 (Zhang, Liye) – Core 中的错误修复

感谢所有贡献者!


Spark 新闻存档