Spark 1.2.1 版本发布

Spark 1.2.1 是一个包含稳定性修复的维护版本。此版本基于 Spark 的 branch-1.2 维护分支。我们建议所有 1.2.0 用户升级到此稳定版本。此版本共有 69 位开发者贡献。

要下载 Spark 1.2.1，请访问下载页面。

修复

Spark 1.2.1 包含多个组件的错误修复。以下突出显示了一些更重要的修复。您可以访问 Spark 问题跟踪器以获取完整的修复列表。

安全

  • 锁定临时文件存储的文件权限

Spark Core

  • Netty shuffle 忽略 spark.blockManager.port (SPARK-4837)
  • MetricsServlet 未正确初始化 (SPARK-4595)
  • Repl 和 YARN 依赖项未发布到 Maven (SPARK-5289)
  • SparkConf 不是线程安全的 (SPARK-5355)
  • 链接 Spark 时出现字节码错误 (SPARK-2075)

SQL

  • CACHE TABLE AS SELECT 在使用 Hive UDF 时失败 (SPARK-5187)
  • 从投影中使用 select 查询时，属性区分大小写 (SPARK-4959)
  • 为 Hive 13 构建的 Spark SQL 在并发元数据查询下失败 (SPARK-4908)
  • 当在 group by 子句和 select 子句中使用相同表达式时，抛出“Expression not in GROUP BY”错误 (SPARK-4296)

Streaming

  • 预写日志的正确文件清理 (SPARK-5147)
  • 检查点恢复期间现有文件错误 (SPARK-4835)
  • 流式上下文停止时 Socket Receiver 未停止 (SPARK-2892)

PySpark

贡献者

以下开发者为此版本做出了贡献

  • Aaron Davidson – 修复了 Core 中的错误
  • Alex Liu – 改进了 Core 和 SQL；修复了 SQL 中的错误
  • Andrew Ash – Core 中的文档
  • Andrew Or – 改进了 Core 和 YARN；修复了 Core 和 YARN 中的错误
  • Bilna – Streaming 中的测试
  • Brennon York – 修复了 Core 中的错误
  • Cheng Hao – 修复了 Core 和 SQL 中的错误
  • Cheng Lian – 修复了 Core 中的错误
  • Christophe Preaud – 改进了 Core
  • Dale Richardson – 改进了 Core
  • Davies Liu – 修复了 Core、MLlib 和 PySpark 中的错误
  • Derek Ma – 修复了 Shuffle 中的错误
  • Earne – 改进了 Core 和 GraphX
  • GuoQiang Li – 修复了 Core 和 YARN 中的错误
  • Hari Shreedharan – 修复了 Streaming 中的错误
  • Ilayaperumal Gopinathan – 修复了 Streaming 中的错误
  • Ilya Ganelin – 修复了 Core 和 Shuffle 中的错误
  • Jacek Lewandowski – 修复了 Core 中的错误
  • Jeremy Freeman – 修复了 MLlib 和 PySpark 中的错误
  • Jongyoul Lee – Streaming 中的文档；修复了 Core 和 Mesos 中的错误
  • Joseph K. Bradley – 修复了 Core、MLlib 和 PySpark 中的错误
  • Josh Rosen – 改进了 Core 和 SQL；Core 中的新功能；修复了 Streaming 和 PySpark 中的错误
  • Kanwaljit Singh – 修复了 Core 中的错误
  • Kenji Kikushima – 修复了 GraphX 中的错误
  • Kousuke Saruta – 修复了 Core 和 Web UI 中的错误
  • Lianhui Wang – 修复了 Core 中的错误
  • Madhu Siddalingaiah – Core 中的文档
  • Marcelo Vanzin – 修复了 Core 中的错误
  • Michael Armbrust – 改进了 Core；修复了 SQL 中的错误
  • Michael Davies – 改进了 SQL
  • Nan Zhu – 改进并修复了 Streaming
  • Nathan Kronenfeld – 修复了 Core 中的错误
  • Nicholas Chammas – Core 中的文档
  • Patrick Wendell – 改进了 Core 并完善了文档
  • Peter Klipfel – Core 中的文档
  • Peter Vandenabeele – Core 中的文档
  • Ryan Williams – 改进并修复了 Core 中的错误，完善了文档
  • SaintBacchus – 修复了 Core 和 YARN 中的错误
  • Saisai Shao – 修复了 Core 中的错误
  • Saisai Shao – 改进了 Streaming；修复了 Streaming 和 SQL 中的错误；改进了 Streaming
  • Sandy Ryza – 改进了 Core
  • Sean Owen – 改进了 Core；Core 中的愿望；Core 中的文档；修复了 Java API、Core 和 SQL 中的错误
  • Shixiong Zhu – 改进了 Streaming 和 Shuffle；修复了 Core 和 Streaming 中的错误；Core 和 YARN 中的文档
  • Su Yan – 改进了 Core；修复了 Core 和 Web UI 中的错误
  • Takeshi Yamamuro – 改进并修复了 GraphX
  • Tathagata Das – 改进并完善了 Streaming
  • Timothy Chen – Core 中的文档
  • Tingjun Xu – 修复了 YARN 中的错误
  • Tsuyoshi Ozawa – Core 和 YARN 中的文档
  • UncleGen – 改进了 Web UI；修复了 Core 中的错误
  • Venkata Ramana Gollamudi – 修复了 Core 中的错误
  • Wang Tao – 修复了 Core 中的错误
  • Xiangrui Meng – MLlib 中的文档
  • Xiaohua Yi – 修复了 SQL 中的错误
  • Xiaojing Wang – Core 中的文档
  • Yash Datta – 修复了 SQL 中的错误
  • Ye Xianjin – 修复了 Core 中的错误
  • Yuhao Yang – 改进并修复了 MLlib
  • Zhang, Liye – 改进了 Web UI

感谢所有贡献者！


Spark 新闻存档

最新新闻

存档