2023 年 9 月
這些功能和 Azure Databricks 平台改善功能於 2023 年 9 月發行。
注意
分階段發行。 您的 Azure Databricks 工作區可能要到初始發行日期後一週或以上才會更新。
在單一使用者叢集提供 Lakehouse Federation
2023 年 9 月 29 日
Lakehouse 同盟目前可在使用 Databricks Runtime 13.1 和更新版本的單一使用者叢集上使用。 只有連線擁有者才可以在同盟目錄上執行查詢。 請參閱 什麼是 Lakehouse 同盟?。
委派在 Unity Catalog 建立儲存體認證的能力
2023 年 9 月 29 日
您現在可以將權限授與使用者,以使用新的 CREATE STORAGE CREDENTIAL
權限在 Unity 目錄中繼存放區中建立儲存體認證。 請參閱 CREATE STORAGE CREDENTIAL。
Databricks Runtime 14.1 (搶鮮版 (Beta))
2023 年 9 月 28 日
Databricks Runtime 14.1 和 Databricks Runtime 14.1 ML 現在可作為搶鮮版 (Beta) 使用。
請參閲 Databricks Runtime 14.1 和適用於機器學習的 Databricks Runtime 14.1。
LLM 的 GPU 模型服務最佳化已公開預覽
2023 年 9 月 28 日
Azure Databricks 上的模型服務支援使用 GPU 計算資源來部署 PyTorch 和 TensorFlow 模型。 此功能在選取區域中處於公開預覽狀態,也適用於使用 mlflow.pyfunc
、mlflow.pytorch
、mlflow.tensorflow
和 mlflow.transformers
類別所記錄之模型的 GPU 部署。 請參閱 GPU 工作負載類型。
此預覽版也包含針對提供大型語言模型最佳化的 GPU 部署支援。 請參閱最佳化的大型語言模型 (LLM) 服務
防止在觸達並行限制時略過工作的執行
2023 年 9 月 27 日 - 2023 年 10 月 2 日
若要防止因為並行限制而略過 Azure Databricks 作業的執行,您現在可以啟用工作的佇列。 在啟用佇列時,如果達到並行限制時,作業會放在佇列中,直到有容量可用以執行作業為止。 請參閱啟用工作執行的佇列。
Databricks Terraform 提供者已更新至 1.27.0 版
2023 年 9 月 27 日
Databricks Terraform 提供者 1.27.0 版新增 owner
和 force_destroy
至 databricks_metastore_data_access
,包括數個額外的改善和錯誤修復等等。 如需詳細資訊,請參閱 1.27.0 版本的變更記錄。
Databricks CLI 已更新至 0.206.0 版 (公開預覽)
2023 年 9 月 27 日
Databricks 命令列介面 (Databricks CLI) 已更新至 0.206.0 版。 此版本可針對 Databricks Asset Bundles 組合中的管線叢集啟用目標覆寫、改善套件組合範本初始化體驗等等。 如需詳細資訊,請參閱 0.206.0 版本的變更記錄。
適用於 Go 的 Databricks SDK 已更新至 0.21.0 版 (搶鮮版 (Beta))
2023 年 9 月 27 日
Databricks SDK for Go 0.21.0 版引進了十幾個重大 API 變更、新增十幾個 API,並新增十幾個欄位。 如需詳細資訊,請參閱 0.21.0 版本的變更記錄。
模型服務端點的推斷資料表為公開預覽
2023 年 9 月 26 日
在您的模型服務端點上啟用推論資料表,以擷取傳入的要求和傳出的回覆到這些端點,並將其記錄為 Unity 目錄差異資料表。 反過來,您可以使用這個資料表中的資料監視、偵錯及改善 ML 模型。 請參閱監視和偵錯模型的推論表。
若要註冊公開預覽版,請連絡 Azure Databricks 客戶團隊。
Databricks ODBC 驅動程式 2.7.5
2023 年 9 月 23 日
我們已發行 Databricks ODBC 驅動程式 2.7.5 版 (下載)。 此版本新增下列功能和改進:
- OAuth 2.0 用戶端驗證增強功能與 OIDC 端點探索支援。
- 使用客戶提供的金鑰進行伺服器端加密。
- 時間日期函式。
- 改善了 Cloud Fetch 的錯誤訊息。
- 安全性更新。
此版本也會解決 2.7.3 中的下列迴歸:
- 如果呼叫端傳遞主要資料表或外部資料表目錄的
SQLForeignKeys
值,則NULL
函式會傳回空的結果。
如果其他資料表的目錄設定為 NULL
,則 2.7.5 版現在會傳回與相關資料表相關聯的所有主索引鍵或外部索引鍵。
適用於 Visual Studio Code 的 Databricks 延伸項目已更新至 1.1.3 版
2023 年 9 月 21 日
Visual Studio Code 1.1.3 版本的 Databricks 延伸模組新增一些次要修正。 如需詳細資訊,請參閱 1.1.3 版本的變更記錄。
以服務主體身分執行工作已正式發行
2023 年 9 月 21 日
服務主體的角色,以及使用服務主體身分識別執行作業的作業設定現已正式發行。
請參閱管理服務主體的角色和設定作業執行的身分識別。
Databricks CLI 已更新至 0.205.2 版 (公開預覽)
2023 年 9 月 21 日
Databricks 命令列介面 (Databricks CLI) 已更新至 0.205.2 版。 此版本包含一些次要更新。 如需詳細資訊,請參閱 0.205.2 版本的變更記錄。
Databricks CLI 已更新至 0.205.1 版 (公開預覽)
2023 年 9 月 20 日
Databricks 命令列介面 (Databricks CLI) 已更新至 0.205.1 版。 此版本會啟用 Databricks Asset Bundles 組合中作業工作的目標覆寫等等。 如需詳細資訊,請參閱 0.205.1 版本的變更記錄。
適用於 Go 的 Databricks SDK 已更新至 0.20.0 版 (搶鮮版 (Beta))
2023 年 9 月 20 日
Databricks SDK for Go 0.20.0 版新增了十幾個 API、新增了六個欄位、變更幾個欄位和方法,並移除一些 API。 如需詳細資訊,請參閱 0.20.0 版本的變更記錄。
適用於 Python 的 Databricks SDK 已更新至 0.9.0 版 (搶鮮版 (Beta))
2023 年 9 月 20 日
Databricks SDK for Python 0.9.0 版的 Databricks SDK 會變更幾個方法和欄位、新增約 10 個欄位、新增約 20 個資料類別,以及介紹其他變更和移除。 如需詳細資訊,請參閱 0.9.0 版本的變更記錄。
適用於 Python 的 Databricks SDK 已更新至 0.7.1 版 (搶鮮版 (Beta))
2023 年 9 月 20 日
Databricks SDK for Python 0.7.1 版的 Databricks SDK 包含可改善檔案下載效能的次要修正程式。 如需詳細資訊,請參閱 0.7.1 版本的變更記錄。
Databricks Terraform 提供者已更新至 1.26.0 版
2023 年 9 月 20 日
Databricks Terraform 提供者 1.26.0 版新增對 Unity 目錄磁碟區 init 指令碼的支援,包括數項額外的改進和錯誤修復等等。 如需詳細資訊,請參閱 1.26.0 版本的變更記錄。
適用於 Databricks Runtime 14.0 的 Databricks Connect
2023 年 9 月 20 日
Databricks Connect for Databricks Runtime 14.0 支援完整的結構化串流 (包括 foreachBatch
),以及長時間執行的查詢,這些查詢會在中斷後重新附加至查詢。
Lakeview 儀表板已公開預覽
2023 年 9 月 20 日
Lakeview 儀表板可讓您使用簡化且統一的資料控管模型來共用視覺效果和資料集。 請參閱儀表板。
適用於 Scala 的 Databricks Connect V2 為公開預覽
2023 年 9 月 19 日
Databricks Connect for Databricks Runtime 13.3 LTS 現在支援公開預覽版中的 Scala,包括 DataFrame、Delta、結構化串流等。
針對 Python,現在支援查詢取消,而 DatabricksSession
類別現在可以用於 Azure Databricks 筆記本和作業。
GPU 模型服務已公開預覽
2023 年 9 月 19 日
Azure Databricks 上的模型服務支援使用 GPU 計算資源來部署 PyTorch 和 TensorFlow 模型。 此功能在選取區域中處於 [公開預覽] 狀態,也適用於使用 mlflow.pyfunc
、mlflow.pytorch
、mlflow.tensorflow
和 mlflow.transformers
類別所記錄之模型的 GPU 部署。 請參閱 GPU 工作負載類型。
Unity Catalog 現已推出隨選特徵計算 (公開預覽)
2023 年 9 月 14 日
現在可以在推斷時間按需計算機器學習特徵。 功能計算邏輯、模型和資料全都由 Unity Catalog 控管。 這可讓模型使用只能在推斷時間使用的輸入來計算特徵,例如使用者的目前位置。 如需詳細資訊,請參閱使用 Python 使用者定義功能隨選計算功能。
Databricks Runtime 14.0 已正式發行
2023 年 9 月 14 日
Databricks Runtime 14.0 和 Databricks Runtime 14.0 ML 現已正式發行。
請參閱 Databricks Runtime 14.0 (EoS) 和適用於機器學習的 Databricks Runtime 14.0 (EoS)。
帳戶電子郵件通知升級
2023 年 9 月 14 日
當使用者新增至 Azure Databricks 帳戶時,Databricks 不會再傳送電子郵件通知。 當使用者獲得工作區存取權時,將會繼續收到電子郵件通知。
Databricks Terraform 提供者已更新至 1.25.1 版
2023 年 9 月 13 日
Databricks Terraform 提供者 1.25.1 版已發行,但有次要改善和錯誤修復。 如需詳細資訊,請參閱 1.25.1 版本的變更記錄。
適用於 Go 的 Databricks SDK 已更新至 0.19.2 版 (搶鮮版 (Beta))
2023 年 9 月 13 日
Databricks SDK for Go 0.19.2 版包含一個次要修正程式。 如需詳細資訊,請參閱 0.19.2 版本的變更記錄。
Databricks CLI 已更新至 0.205.0 版 (公開預覽)
2023 年 9 月 13 日
Databricks 命令列介面 (Databricks CLI) 已更新至 0.205.0 版。 這是 Databricks CLI 的第一個版本,可支援公開預覽版中的 Databricks Asset Bundles。 如需詳細資訊,請參閱 0.205.0 版本的變更記錄。
為 /Workspace
保留的位置
2023 年 9 月 13 日
位置 /Workspace
現在已保留。 您無法再定義相對於 Azure Databricks 中根路徑、名為 /Workspace
的目錄。
Databricks 資產套件組合 (公開預覽)
2023 年 9 月 12 日
Databricks Asset Bundles現在處於公開預覽狀態,可讓端對端資料、分析和 ML 專案以來源檔案集合表示。 這可讓您更輕鬆地套用資料工程最佳做法,例如原始檔控制、程式碼檢閱、測試和 CI/CD。
Databricks Terraform 提供者已更新至 1.25.0 版
2023 年 9 月 12 日
Databricks Terraform 提供者 1.25.0 版包含新增 IS_OWNER
Databricks SQL 倉儲的權限、次要修正、文件更新等等。 如需詳細資訊,請參閱 1.25.0 版本的變更記錄。
適用於 Visual Studio Code 的 Databricks 延伸項目已更新至 1.1.2 版
2023 年 9 月 12 日
Visual Studio Code 的 Databricks 延伸模組 1.1.2 版新增了對 Azure Databricks 筆記本中 %run
和 # MAGIC
的實驗性支援,修正多個本機 Databricks CLI 安裝的路徑問題等等。 如需詳細資訊,請參閱 1.1.2 版本的變更記錄。
Partner Connect 支援 Snowplow
2023 年 9 月 12 日
您現在可以使用 Partner Connect 將 Azure Databricks 工作區連線至 Snowplow。 如需詳細資訊,請參閱連線至 Snowplow。
Databricks CLI 已更新至 0.204.1 版 (公開預覽)
2023 年 9 月 11 日
Databricks 命令列介面 (Databricks CLI) 已更新至 0.204.1 版。 如需詳細資訊,請參閱 0.204.1 版本的變更記錄。
使用資料列篩選與資料列篩選敏感資料 (公開預覽)
2023 年 9 月 11 日
您現在可以將資料列篩選和資料行遮罩套用至資料表,以防止特定使用者存取敏感性資料。 這些篩選和遮罩會實作為 SQL 使用者定義函式 (UDF)。 請參閱使用資料列篩選和資料行遮罩來篩選敏感資料表資料。
系統資料表現在包含 Marketplace 結構描述 (公開預覽)
2023 年 9 月 8 日
系統資料表現在包含儲存 marketplace
Marketplace 提供者資料的結構描述。 您可以查詢 marketplace.listing_access_events
資料表,以擷取取用者資訊,取得清單上所採取的動作。 如需詳細資訊,請參閱 市集系統資料表參考。
定價系統資料表現已推出 (公開預覽)
2023 年 9 月 8 日
系統資料表現在包含定價資料表 (system.billing.list_prices
),您可以在其中監視 SKU 隨時間變化的成本。。 這些記錄可以協助您執行成本分析和監視定價變更。 請參閱定價系統資料表參考。
適用於 Go 的 Databricks SDK 已更新至 0.19.1 版 (搶鮮版 (Beta))
2023 年 9 月 7 日
Databricks SDK for Go 0.19.1 版繼續一些次要更新和修正。 如需詳細資訊,請參閱 0.19.1 版本的變更記錄。
Databricks ODBC 驅動程式 2.7.3
2023 年 9 月 7 日
我們已發行 Databricks ODBC 驅動程式 2.7.3 版 (下載)。 此版本包括下列功能和修正︰
- 藉助升級第三方相依性來修正弱點。
SQL_ATTR_MAX_ROWS
支援,可讓用戶端限制查詢中擷取的資料列數目,以加速快速載入 (例如預覽)。- 更新了 MacOS 支援。 驅動程式現在支援 Apple Silicon/M1。
- OAuth2 瀏覽器型驗證支援,可加速單一登入 (SSO)。
重要
如果您使用主索引鍵和外部索引鍵 API,且呼叫端傳遞主要資料表或外部資料表目錄的 SQLForeignKeys
值,則 NULL
函式會傳回空的結果。 開發人員已知此問題。
Databricks CLI 已更新至 0.204.0 版 (公開預覽)
2023 年 9 月 6 日
Databricks 命令列介面 (Databricks CLI) 已更新至 0.204.0 版。 此版本包含權限相關命令的群組,將和變更新增至數個命令等等。 如需詳細資訊,請參閱 0.204.0 版本的變更記錄。
資料總管現已改為目錄總管
2023 年 9 月 6 日
資料總管已重新命名為目錄總管,以識別您可以使用它來處理 Unity 目錄中所有安全性實體物件的事實,而不只是資料物件。 請參閱什麼是目錄總管?。
適用於 Go 的 Databricks SDK 已更新至 0.19.0 版 (搶鮮版 (Beta))
2023 年 9 月 4 日
Databricks SDK for Go 0.19.0 版會重新命名權限 API、新增 8 個 API、新增 5 個欄位、變更和移除幾個欄位,以及變更幾個方法。 如需詳細資訊,請參閱 0.19.0 版本的變更記錄。
適用於 Python 的 Databricks SDK 已更新至 0.8.0 版 (搶鮮版 (Beta))
2023 年 9 月 4 日
Databricks SDK for Python 0.8.0 版會重新命名權限 API、新增六個欄位、新增六個資料類別,並匯入數項變更和移除。 如需詳細資訊,請參閱 0.8.0 版本的變更記錄。
在 Unity Catalog 委派加入允許清單權限
2023 年 9 月 1 日
您現在可以委派在 Unity 目錄允許清單中管理項目的權限。 請參閱共用計算上的 Allowlist 程式庫和 init 指令碼。
Repos 中的 GitHub 應用程式整合已正式發行
2023 年 9 月 1 日
Repos 中的 GitHub 應用程式整合已正式發行。 在 Repos 中與 GitHub 整合時,此功能可讓您進行更簡單的 Git 認證管理。
重要
GitHub Enterprise Server 不支援 GitHub 應用程式。