Spark 1.2.1 版本发布

Spark 1.2.1 是一个维护版本，包含稳定性修复。此版本基于 Spark 的 branch-1.2 维护分支。 我们建议所有 1.2.0 用户升级到此稳定版本。 此版本的贡献来自 69 位开发人员。

要下载 Spark 1.2.1，请访问下载页面。

修复

Spark 1.2.1 包含多个组件的错误修复。 下面突出显示了一些更重要的修复。 您可以访问 Spark 问题跟踪器查看完整的修复列表。

安全

  • 锁定临时文件存储的文件权限

Spark Core

  • Netty shuffle 忽略 spark.blockManager.port (SPARK-4837)
  • MetricsServlet 未正确初始化 (SPARK-4595)
  • Repl 和 YARN 依赖项未发布到 Maven (SPARK-5289)
  • SparkConf 不是线程安全的 (SPARK-5355)
  • 链接到 Spark 时出现字节码错误 (SPARK-2075)

SQL

  • CACHE TABLE AS SELECT 在 Hive UDF 下失败 (SPARK-5187)
  • 使用投影中的 select 查询时，属性区分大小写 (SPARK-4959)
  • 为 Hive 13 构建的 Spark SQL 在并发元数据查询下失败 (SPARK-4908)
  • 当在 group by 子句和 select 子句中使用相同的表达式时，抛出“表达式不在 GROUP BY 中” (SPARK-4296)

Streaming

  • 为预写日志进行适当的文件清理 (SPARK-5147)
  • 检查点恢复期间出现现有文件错误 (SPARK-4835)
  • 当流上下文停止时，套接字接收器不停止 (SPARK-2892)

PySpark

贡献者

以下开发人员为该版本做出了贡献

  • Aaron Davidson – Core 中的错误修复
  • Alex Liu – Core 和 SQL 中的改进；SQL 中的错误修复
  • Andrew Ash – Core 中的文档
  • Andrew Or – Core 和 YARN 中的改进；Core 和 YARN 中的错误修复
  • Bilna – Streaming 中的测试
  • Brennon York – Core 中的错误修复
  • Cheng Hao – Core 和 SQL 中的错误修复
  • Cheng Lian – Core 中的错误修复
  • Christophe Preaud – Core 中的改进
  • Dale Richardson – Core 中的改进
  • Davies Liu – Core、MLlib 和 PySpark 中的错误修复
  • Derek Ma – Shuffle 中的错误修复
  • Earne – Core 和 GraphX 中的改进
  • GuoQiang Li – Core 和 YARN 中的错误修复
  • Hari Shreedharan – Streaming 中的错误修复
  • Ilayaperumal Gopinathan – Streaming 中的错误修复
  • Ilya Ganelin – Core 和 Shuffle 中的错误修复
  • Jacek Lewandowski – Core 中的错误修复
  • Jeremy Freeman – MLlib 和 PySpark 中的错误修复
  • Jongyoul Lee – Streaming 中的文档；Core 和 Mesos 中的错误修复
  • Joseph K. Bradley – Core、MLlib 和 PySpark 中的错误修复
  • Josh Rosen – Core 和 SQL 中的改进；Core 中的新功能；Streaming 和 PySpark 中的错误修复
  • Kanwaljit Singh – Core 中的错误修复
  • Kenji Kikushima – GraphX 中的错误修复
  • Kousuke Saruta – Core 和 Web UI 中的错误修复
  • Lianhui Wang – Core 中的错误修复
  • Madhu Siddalingaiah – Core 中的文档
  • Marcelo Vanzin – Core 中的错误修复
  • Michael Armbrust – Core 中的改进；SQL 中的错误修复
  • Michael Davies – SQL 中的改进
  • Nan Zhu – Streaming 中的改进和错误修复
  • Nathan Kronenfeld – Core 中的错误修复
  • Nicholas Chammas – Core 中的文档
  • Patrick Wendell – Core 中的改进和文档
  • Peter Klipfel – Core 中的文档
  • Peter Vandenabeele – Core 中的文档
  • Ryan Williams – Core 中的改进、错误修复和文档
  • SaintBacchus – Core 和 YARN 中的错误修复
  • Saisai Shao – Core 中的错误修复
  • Saisai Shao – Streaming 中的改进；Streaming 和 SQL 中的错误修复；Streaming 中的改进
  • Sandy Ryza – Core 中的改进
  • Sean Owen – Core 中的改进；Core 中的期望；Core 中的文档；Java API、Core 和 SQL 中的错误修复
  • Shixiong Zhu – Streaming 和 Shuffle 中的改进；Core 和 Streaming 中的错误修复；Core 和 YARN 中的文档
  • Su Yan – Core 中的改进；Core 和 Web UI 中的错误修复
  • Takeshi Yamamuro – GraphX 中的改进和错误修复
  • Tathagata Das – Streaming 中的改进
  • Timothy Chen – Core 中的文档
  • Tingjun Xu – YARN 中的错误修复
  • Tsuyoshi Ozawa – Core 和 YARN 中的文档
  • UncleGen – Web UI 中的改进；Core 中的错误修复
  • Venkata Ramana Gollamudi – Core 中的错误修复
  • Wang Tao – Core 中的错误修复
  • Xiangrui Meng – MLlib 中的文档
  • Xiaohua Yi – SQL 中的错误修复
  • Xiaojing Wang – Core 中的文档
  • Yash Datta – SQL 中的错误修复
  • Ye Xianjin – Core 中的错误修复
  • Yuhao Yang – MLlib 中的改进和错误修复
  • Zhang, Liye – Web UI 中的改进

感谢所有做出贡献的人！


Spark 新闻存档

最新新闻

存档