2022 年 2 月
這些功能和 Azure Databricks 平臺改良功能於 2022 年 2 月發行。
注意
分階段發行。 您的 Azure Databricks 帳戶可能要到初始發行日期後一週或以上才會更新。
更輕鬆地排程 Delta Live Tables 管線 (公開預覽)
2022 年 2 月 28 日 - 3 月 2 日
您現在可以直接從 Delta Live Tables UI 為觸發的管線建立 Azure Databricks 排程工作。 您先前需要建立作業,以及從作業 UI 執行作業的排程。
輕鬆瀏覽 Delta Live Tables 管線更新的歷程記錄 (公開預覽)
2022 年 2 月 28 日 - 3 月 2 日
您現在可以在 Delta Live Tables UI 中看到管線更新的歷史記錄,包括 update 狀態、詳細資料和事件,可以使用 Update 歷史記錄 下拉式清單查看。
確保 Jobs API 立即執行要求的工作等冪性
2022 年 2 月 22-28 日:版本 3.66
您現在可以使用選擇性 idempotency_token
參數搭配 [作業 API 立即執行 ] 作業,以確保剛啟動一個作業的執行。 先前,提交相同作業的多個 Run now
要求可能已啟動多個執行。
若要深入瞭解作業等冪性,請參閱 如何確保作業的等冪性。
工作服務的穩定性與可擴縮性改善
2022 年 2 月 22-28 日:版本 3.66
下列變更提高了作業服務的穩定性和可擴縮性:
- 每個新作業都會被分配一個更長、唯一、數字、非順序的 identifier。 使用 作業 API 的用戶端,並相依於固定 identifier 長度或循序或單調增加的標識符,必須修改為接受較長、非循序和未排序的標識符。
identifier 類型的
int64
會維持不變,而且使用 IEEE 754 64 位浮點數的用戶端會保留相容性,例如 JavaScript 用戶端。 - 回應某些作業 API 要求的
number_in_job
欄位值現在會 set 為與run_id
相同的值。
比較不同實驗的 MLflow 執行
2022 年 2 月 22-28 日:版本 3.66
您現在可以顯示和比較多個實驗的執行。 請參閱 比較多個實驗的執行。
MLflow 比較執行顯示的改良
2022 年 2 月 22-28 日:版本 3.66
比較回合顯示已改善。 視覺效果現在會出現在頁面頂端。 您現在可以捲動或折疊顯示執行資訊、parameters和計量的 tables。 您現在可以藉由隱藏 parameters 和不因執行而異的計量來簡化顯示。
如需比較執行頁面的相關信息,請參閱 比較執行。 如需如何比較回合的指示,請參閱 比較執行。
改善叢集 UI 中工作執行擁有者的可見度
2022 年 2 月 22-28 日:版本 3.66
計算 UI中的[作業叢集] 索引標籤已更新,以顯示作業以使用者身分執行,而不是作業擁有者。 此 update 是以作業許可權模型的變更為基礎,並可改善作業執行擁有者的可見度。 請參閱 檢視計算。
在 AutoML 中卸除數據集 columns
2022 年 2 月 22-28 日:版本 3.66
在 Databricks Runtime 10.3 ML 和更新版本中,針對分類和回歸問題,您現在可以在數據集中指定 AutoML 不應該用於訓練的 columns。 請參閱 AutoML Python API 參考。
實驗頁面已正式發行
2022 年 2 月 22-28 日:版本 3.66
實驗 頁面 現已正式推出。
支援 Delta Live Tables Python 介面中的暫存 tables
2022 年 2 月 22-28 日:版本 3.66
您現在可以在使用 Delta Live Tables Python 介面宣告 tables 時,使用 temporary
屬性。 定義暫存 table 會指示 Delta Live Tables 不要保存 table 的元數據,並防止在設定 target
設定時發佈 table。 如需定義 Python tables的相關信息,請參閱 Python 規格。
Delta Live Tables 的使用者介面改善 (公開預覽)
2022 年 2 月 22-28 日:版本 3.66
此版本包含 Delta Live Tables UI 的下列增強功能:
- 您現在可以在 Delta Live Tables UI 的 [設定] 對話框中編輯管線設定,提供更方便使用的介面。 先前,您只能藉由編輯 JSON 規格來變更設定。 若要 select UI 或 JSON 檢視來編輯管線設定,請按兩下 [ 設定] 對話方塊上的 [UI] 或 [JSON] 按鈕。
- [管線詳細數據] 頁面上的事件記錄檔現在會醒目提示錯誤記錄,讓您更輕鬆地識別和解決管線中的錯誤。
- 已改善執行管線的進度顯示。 現在,當您檢視管線的圖形時,狀態中的
RUNNING
節點會有動畫傳入邊緣和動畫上框線。
Databricks Runtime 9.0 系列支援結束
2022年2月17日
支援 Databricks Runtime 9.0 和 Databricks Runtime 9.0 for 機器學習 於 2 月 17 日結束。 請參閱 Databricks 支援生命週期。
資料科學與工程登陸頁面更新
2022年2月10日
我們已更新 資料科學 與工程登陸頁面的外觀和風格。 某些鏈接已變更,但沒有任何其他值得注意的功能變更。
Databricks Repos 現在支援 AWS CodeCommit 進行 Git 整合
2022 年 2 月 7-14 日:版本 3.65
您現在可以搭配 Databricks Repos 使用 AWS CodeCommit 存放庫。
改善 Delta Live Tables 管線的視覺效果 (公開預覽)
2022 年 2 月 7-14 日:版本 3.65
管線 DAG 視覺效果經過重新設計,以改善可用性和流覽。 改善包括從左至右而非由上至下顯示圖形的變更,提供管線執行的更直覺式檢視。
已更新 Markdown 剖析器
2022 年 2 月 7-14 日:版本 3.65
Azure Databricks 筆記本中使用的 Markdown 剖析器已更新。 先前 update 的一些問題已被修正。 具體而言,不再需要在主題標籤與標題文字之間放置空格,而且現在會正確轉譯具有空格的連結。
Delta Live Tables 現在支持異動數據擷取處理 (公開預覽)
2022 年 2 月 7-14 日:版本 3.65
您現在可以在 Delta Live Tables 管線中實作異動數據擷取 (CDC) 處理。 SQL 和 Python 介面支援 CDC 處理。 請參閱 套用變更 API:使用 Delta Live Tables簡化異動數據擷取。
新增的 metastores 現在可在多個地區使用
2022 年 2 月 8 日
下列 metastores 現在可在下列區域中使用:
brazilsouth
:
consolidated-brazilsouth-prod-metastore.mysql.database.azure.com
centralus
:
consolidated-centralus-prod-metastore-addl-2.mysql.database.azure.com
consolidated-centralus-prod-metastore-addl-3.mysql.database.azure.com
eastus
:
consolidated-eastus-prod-metastore-addl-2.mysql.database.azure.com
consolidated-eastus-prod-metastore-addl-3.mysql.database.azure.com
consolidated-eastus-prod-metastore-addl-4.mysql.database.azure.com
eastus2
consolidated-eastus2-prod-metastore-addl-2.mysql.database.azure.com
consolidated-eastus2-prod-metastore-addl-3.mysql.database.azure.com
francecentral
consolidated-francecentral-prod-metastore.mysql.database.azure.com
northeurope
consolidated-northeurope-prod-metastore-addl-2.mysql.database.azure.com
consolidated-northeurope-prod-metastore-addl-3.mysql.database.azure.com
southeastasia
consolidated-southeastasia-prod-metastore-addl-1.mysql.database.azure.com
switzerlandnorth
consolidated-switzerlandnorth-prod-metastore-0.mysql.database.azure.com
switzerlandwest
consolidated-switzerlandwest-prod-metastore-0.mysql.database.azure.com
uksouth
consolidated-uksouth-prod-metastore-addl-1.mysql.database.azure.com
westeurope
consolidated-westeurope-prod-metastore-addl-2.mysql.database.azure.com
consolidated-westeurope-prod-metastore-addl-3.mysql.database.azure.com
您應始終在使用者定義的路由 (UDR) 中包含您使用的每個區域的所有相關主機名稱。 請參閱 Azure Databricks 的使用者定義路由設定。
Select 用於 AutoML 的演算法框架
2022 年 2 月 7-14 日:版本 3.65
在 Databricks Runtime 10.3 ML 和更新版本中,您可以指定演算法架構,例如 scikit-learn,AutoML 不應將其視為開發模型。 根據預設,AutoML 會將 scikit-learn、XGBoost 和 LightGBM 的模型視為分類和回歸問題,以及來自先知和 Auto-ARIMA 的模型來預測問題。 請參閱 AutoML Python API 參考。
託管 MLflow 模型的 Databricks 現在可以從線上存放區查詢特徵
2022 年 2 月 3 日
使用功能存放區元資料封裝的模型可以 在服務時間自動從線上商店查詢功能 values。
Databricks Runtime 10.3 和 10.3 ML 已正式發行;10.3 Photon 為公開預覽
2022年2月2日
Databricks Runtime 10.3 和 Databricks Runtime 10.3 ML 現已正式推出。 Databricks Runtime 10.3 Photon 處於公開預覽狀態。