2024 年 11 月
这些功能和 Azure Databricks 平台的改进已于 2024 年 11 月发布。
注意
发布分阶段进行。 Azure Databricks 帐户可能要等到初始发布日期后的一周或更长时间才会更新。
自动群集更新和增强的安全性和符合性 UI 已正式发布
2024 年 11 月 19 日
自动群集更新现已正式发布。 自动群集更新可确保工作区中的所有群集定期更新到最新的主机 OS 映像和安全修补程序。 现在,还可以从帐户控制台启用增强的安全性和合规性功能。 请参阅 自动群集更新 并 配置增强的安全性和符合性设置。
扩展了对笔记本中 Python 调试器的支持
2024 年 11 月 18 日
Databricks 笔记本中的内置 Python 调试器现在支持在 Databricks Runtime 14.3 LTS 或更高版本中使用共享访问模式配置的无服务器计算和计算。 若要了解有关调试器的详细信息,请参阅 调试笔记本。
对增量实时表的查询历史记录和查询配置文件支持
2024 年 11 月 15 日
Azure Databricks 现在提供了改进的工具,用于监视 Delta Live Tables 管道中的查询性能。 请参阅 Delta Live Tables 管道的访问查询历史记录。
马赛克 AI 模型训练重塑品牌
2024 年 11 月 15 日
马赛克 AI 模型训练已重新命名,以包含现有功能:
- 基础模型微调,以前称为马赛克 AI 模型训练,继续为基础模型提供高级自定义。
- 现在可以从“试验”部分访问 AutoML 功能。
在后续 SQL 单元格中重复使用 SQL 输出_sqldf
2024 年 11 月 15 日
在 Databricks Runtime 14.3 及更高版本中,在 Databricks 笔记本中运行 SQL 查询会生成可在下游 SQL 单元格中使用的隐式数据帧(_sqldf
)。 这增加了对在 Databricks Runtime 13.3 中引入的 Python 单元格中使用 _sqldf
变量的支持。 请参阅 “浏览 SQL 单元格”结果。
Azure 托管资源的无服务器计算支持的专用连接
2024 年 11 月 15 日
现在,无服务器计算支持具有本机专用终结点支持的所有 Azure 托管资源都受支持。 此功能现已正式发布。 请参阅从无服务器计算配置专用连接。
作业、笔记本和增量实时表的专用连接支持
2024 年 11 月 15 日
无服务器计算的专用连接现在支持作业、笔记本和增量实时表工作负载。 此功能现已正式发布。 请参阅从无服务器计算配置专用连接。
仓库系统表现已推出(公共预览版)
2024 年 11 月 15 日
表 system.compute.warehouses
记录 SQL 仓库配置。 每行都是特定时间点 SQL 仓库属性的快照。 属性更改时会创建新的快照。 请参阅 仓库系统表参考。
跨平台视图共享 (公共预览版)
2024 年 11 月 14 日
Databricks 收件人现在可以使用任何 Databricks 计算资源查询共享视图。 以前,如果收件人的 Azure Databricks 帐户不同于提供程序的帐户,则收件人只能使用无服务器 SQL 仓库查询共享视图。 请参阅 “读取共享视图”。
视图共享现在还扩展到开放共享连接器。 请参阅使用 Delta Sharing 开放共享读取共享的数据(针对接收者)。
清理室公共预览版已取消,新增功能
2024 年 11 月 13 日
Databricks Clean Rooms 使用 Delta Sharing 和无服务器计算来提供安全私密的环境,多个参与方可在其中共享敏感的企业数据并进行协作,而无需直接访问彼此的数据。 清理室公共预览版现已向 Azure 和 AWS 上的所有客户开放,并包含以下新功能:
输出表 是笔记本运行生成的临时只读表,并共享到笔记本运行程序的 Unity 目录元存储。
输出表可由 Azure、AWS 和 Google Cloud 上的协作者创建或读取,但仅当中央清理室托管在 AWS 上时才支持它们。
通过清理室笔记本任务类型 ,可以在工作流中将 Azure Databricks 笔记本作为工作流的一部分运行。 除了支持任务值和输出表外,这是一个强大的工具,用于在清理室共享的数据上运行复杂的工作流。
请参阅什么是 Azure Databricks Clean Rooms?。
Databricks Runtime 16.0 正式版
2024 年 11 月 11 日
Databricks Runtime 16.0 和 Databricks Runtime 16.0 ML 现已正式发布。
有关机器学习,请参阅 Databricks Runtime 16.0 和 Databricks Runtime 16.0。
中断性变更:托管 RStudio 是生命周期结束
2024 年 11 月 11 日
在 Databricks Runtime 16.0 及更高版本中,Databricks 托管的 RStudio Server 在任意 Azure Databricks 工作区上都是生命周期结束且不可用的。 若要了解详细信息并查看 RStudio 的替代项列表,请参阅 托管 RStudio Server 弃用。
为所有新的 Azure Databricks 帐户启用预测优化
2024 年 11 月 11 日
11 月 11 日,Databricks 启用预测优化,作为所有 新的 Azure Databricks 帐户的默认值。 以前,它默认处于禁用状态,可以通过管理员帐户启用。 启用预测优化后,Azure Databricks 会自动运行 Unity 目录托管表的维护操作。 有关预测优化的详细信息,请参阅 Unity 目录托管表的预测优化。
已更新且统一的只读代码块
2024 年 11 月 8 日
现在,目录资源管理器、警报页和 Genie 中提供了新的只读代码块。
增加了快速修复建议
2024 年 11 月 8 日
Databricks 助手快速修复现可识别并建议对更广泛的常见 SQL 和 Python 错误进行更正。 错误检测增加了 50%,快速修复可帮助你更快地调试代码。 请参阅快速修复。
所有模型服务支持区域中可用的基础模型 API 按令牌付费
2024 年 11 月 7 日
在提供马赛克 AI 模型服务的所有区域中,现在支持基础模型 API 按令牌 付费工作负荷。 如果工作区位于“模型服务”区域,但不位于美国或欧盟区域中,则必须为工作区启用 跨地理位置数据处理。 启用后,按令牌付费工作负荷将路由到美国。 Databricks Geo。
使用服务凭证(公共预览版)对外部云服务进行 Unity Catalog 管理的访问
2024 年 11 月 7 日
使用 Azure 托管标识 (MI) 和 Unity Catalog,服务凭证使用云租户的服务实现简单且安全的身份验证。 服务凭证以公共预览版提供,在 Databricks Runtime 15.4 LTS 及更高版本上受支持。 请参阅使用服务凭据管理对外部云服务的访问权限。
英国 Cyber Essentials Plus 合规性控制
2024 年 11 月 7 日
英国 Cyber Essentials Plus 合规性控制 (UKCE+) 提供了增强功能,可帮助你符合对工作区的基本要求。 UKCE+ 是英国政府为与英国政府数据交互的商业组织简化和标准化 IT 安全做法而创建的认证。 请参阅英国 Cyber Essentials Plus 合规性控制。
从无服务器计算支持的专用连接模型服务
2024 年 11 月 5 日
模型服务现在支持使用 Azure 专用链接 从无服务器计算建立的专用连接。 这包括对自定义模型终结点和预配的吞吐量终结点的支持。 请参阅从无服务器计算配置专用连接。
对 Databricks Runtime 14.2 系列的支持已终止
2024 年 11 月 5 日
对 Databricks Runtime 14.2 和用于机器学习的 Databricks Runtime 14.2 的支持已于 11 月 5 日结束。 请参阅 Databricks 支持生命周期。