2019年1月

这些功能和Databricks平台的改进于2019年1月发布bob体育客户端下载。

请注意

发布是阶段性的。您的Databricks帐户最多在初始发布日期后一周才能更新。

即将更改:Python 3将成为创建集群时的默认值

2019年1月29日

当Databricks平台2.9bob体育客户端下载1版本在2月中旬发布时,新集群的默认Python版本将从Python 2切换到Python 3。当然,现有集群不会更改它们的Python版本。但是,如果您在创建新集群时习惯使用Python 2默认值,则需要开始注意Python版本的选择。

Python默认版本

Databricks Runtime 5.2 for Machine Learning (Beta)发布

2019年1月24日

Databricks运行时5.2 ML是建立在Databricks运行时5.2(不支持).它包含许多流行的机器学习库,包括TensorFlow、PyTorch、Keras和XGBoost,并使用Horovod提供分布式TensorFlow训练。除了Databricks Runtime ML 5.1以来的库更新外,Databricks Runtime 5.2 ML还包括以下新特性:

  • GraphFrames现在支持Pregel APIPython)与Databricks的性能优化。

  • HorovodRunner补充道:

    • 在GPU集群中,训练过程被映射到GPU上,而不是工作节点上,以简化对多GPU实例类型的支持。这种内置的支持允许你在不使用自定义代码的情况下将所有gpu分布到多gpu机器上。

    • HorovodRunner.run ()现在返回第一个训练过程的返回值。

参见完整的发行说明Databricks运行时5.2 ML (Beta版).Databricks Runtime 5.2发布

2019年1月24日

Databricks运行时5.2现已可用。Databricks运行时5.2包括Apache Spark 2.4.0、新的Delta Lake和结构化流特性和升级,以及升级的Python、R、Java和Scala库。详细信息请参见Databricks运行时5.2(不支持)

集群配置JSON视图

2019年1月15日至22日

集群配置页面现在支持JSON视图:

集群配置JSON

JSON视图是只读的。方法创建和更新集群集群API 2.0

图书馆用户界面

2019年1月2日至9日:2.88版

最初于2018年11月发布并在此后不久恢复的库UI改进已重新发布。这些更新使您可以更轻松地上传、安装和管理Databricks集群的库。

Databricks UI现在支持工作空间库和集群安装的库。工作区库存在于工作区中,可以安装在一个或多个集群上。集群安装的库是仅存在于其安装所在的集群上下文中的库。此外:

  • 现在可以从上传到对象存储的文件创建库。

  • 现在可以从库详细信息页面和集群的libraries选项卡安装和卸载库。

  • 使用API安装的库现在显示在集群的Libraries选项卡中。

详细信息请参见

集群事件

2019年1月2日至9日:2.88版

新增集群事件,反映Spark驱动状态。详细信息请参见ClusterEventType

集群的用户界面

2019年1月2日至9日:2.88版

请注意

这些更新将在2.88版本中向部分Databricks客户推出,其余的将在2.89版本中推出,后者将在1月的第三周发布。

为了便于使用,集群创建页面已经被清理和重新组织,包括一个新的Advanced Options切换。

集群配置