Azure Databricks 获得支持 GPU 的 VM 支持和新的机器学习运行时

在去年的 Connect() 开发者活动中，微软 公布 用于最高性能流分析项目的 Azure Databricks 服务预览。 Azure Databricks 是一个基于 Apache Spark 的分析平台，可提供一键式设置、简化的工作流和交互式工作区。 今年早些时候，微软 公布 该服务的普遍可用性。

在昨天的 Spark + AI 峰会上，微软宣布了 Azure Databricks 的一些新增强功能。

首先，他们正在增加对启用 GPU 的 VM 的支持。 开发人员现在可以使用这些 VM 轻松地大规模构建、训练和部署 AI 模型。

其次，他们宣布了一种新的机器学习运行时，可以使用 Horovod 对深度神经网络进行分布式多 GPU 训练。 使用这个新的运行时，开发人员可以用几行代码构建深度学习模型。

运行时还包括用于与 Spark DataFrames 无缝集成的 HorovodEstimator。 另一个好消息是，它还预装并预配置了所有必要的软件包，例如 TensorFlow、Keras 和 XGBoost。 Azure Databricks Runtime for Machine Learning 预览版现已作为 Azure Databricks 中高级 SKU 的一部分提供。

Sumber: 微软