2021 年 11 月
這些功能和 Azure Databricks 平台改善功能於 2021 年 11 月發行。
注意
分階段發行。 您的 Azure Databricks 帳戶可能要到初始發行日期後一週或以上才會更新。
建立功能 tables 的標籤 (公開預覽)
2021 年 11 月 30 日 - 12 月 6 日:3.60 版
您現在可以建立功能 tables 的標籤,並使用標籤進行搜尋。
Python 儲存格中 SQL 命令的語法醒目提示和自動完成
2021 年 11 月 30 日 - 12 月 6 日:3.60 版
當您在 Python 命令 (例如 命令) 中使用 SQL 時,可以使用語法醒目提示和 SQL spark.sql
。
從實驗頁面重新命名、刪除和變更 MLflow 實驗的權限 (公開預覽)
2021 年 11 月 30 日 - 12 月 6 日:3.60 版
現在可以從 MLflow 實驗頁面重新命名、刪除和變更實驗的權限。 如需詳細資料,請參閱管理實驗。
筆記本中的新資料設定檔:資料的表格式和圖形摘要 (公開預覽)
2021 年 11 月 30 日 - 12 月 6 日:3.60 版
當您在 Scala 或 Python 中使用 display(<dataframe>)
,或執行 SQL 查詢時,結果窗格會顯示新的索引標籤 Data Profile
,此索引標籤會顯示 DataFrame 或 table的互動式表格式和圖形摘要。 如需詳細資料,請參閱建立新的資料設定檔和建立新的視覺效果。
也可以使用 Databricks 公用程式命令 dbutils.data.summarize。
執行 Delta Live Tables 管線時,對於架構演變的日誌記錄進行了改進
2021 年 11 月 30 日 - 12 月 6 日:3.60 版
如果您的 Delta Live Tables 管線使用 Auto Loader 讀取數據,而在 update 執行過程中輸入數據的 schema 發生變更,則 update 會記錄為 CANCELED
並自動重試。 新的 update 會記錄狀態 SCHEMA_CHANGE
。 先前,當輸入 schema 變更時,update 仍會記錄為 FAILED
,即使 Delta Live Tables 自動重試 update。
Databricks Partner Connect 正式發行
2021 年 11 月 18 日
Databricks Partner Connect 現已正式發行。 您可以使用 Partner Connect 快速輕鬆地探索熱門資料和 AI 工具,並將其連線到 Azure Databricks Lakehouse。 請查閱什麼是 Databricks Partner Connect?。
重大變更:remove 從 $ 逸出和引述環境變數 values 叢集建立
2021 年 11 月 15-30 日:3.59 版
注意
此變更將於 2021 年 12 月 3 日的 01:00-03:00 UTC 還原 。
當您建立叢集時,可以指定環境變數。 在這項變更之前,若要在環境變數值內使用 $
,您需要將其逸出或置於引號內。 執行這項變更後,就不再需要逸出字元或使用引號。 這項變更引入了當前系統中的破壞性變更,因為環境變數 values 中的逸出或加引號的 $
字元現在不再被解譯為 $
。 舉例而言,現在假設有下列環境變數宣告:
WITH_ESCAPING=\\$123
WITH_DOUBLE_QUOTING="$123"
NO_ESCAPING=$123
WITH_SINGLE_QUOTING='$123'
NO_QUOTING=$123
例如,將這些 values 從筆記本列印出:
%sh
echo ${WITH_ESCAPING}
echo ${WITH_DOUBLE_QUOTING}
echo ${NO_ESCAPING}
echo ${WITH_SINGLE_QUOTING}
echo ${NO_QUOTING}
傳回下列 values:
\\$123
"$123"
$123
driver23
$123
注意
此變更僅適用於環境變數, 不適用於秘密。
Repos 中檔案的易用性改良
2021 年 11 月 15-30 日:3.59 版
新功能已新增至檔案文字編輯器:
- 當您建立標記時,系統會自動產生結尾標記。
- 程式碼摺疊功能現已可用。
此外,對於文字檔,您現在可以將完整的存放庫路徑複製到儲存機制根路徑中的路徑。 如需詳細資料,請參閱以程式設計方式與工作區檔案互動。
對舊版 SQL 小工具的支援於 2022 年 1 月 15 日結束
2021 年 11 月 15 日
Databricks 將於 2022 年 1 月 15 日結束對舊版 SQL 小工具的支援。 在該日期之後,筆記本將不再在UI中顯示舊版SQL小工具,但 parameters 通過 %run
傳遞的 仍可搭配舊版 SQL 小工具 API 使用。 為了確保您的 Widget 會繼續在 UI 中轉譯,update 程式代碼以使用 SQL 小工具。
Azure Databricks 工作的使用者介面改良
2021 年 11 月 15-30 日:3.59 版
此版本包括對工作 UI 的下列增強:
- 您現在可以複製單一任務,更輕鬆地將新任務新增至現有工作。 請參閱重新命名、複製或刪除工作。
- 檢視作業執行詳細數據或工作執行詳細數據時,作業標識碼 和 作業執行標識碼 現在是連結,可讓您輕鬆地在作業詳細數據 views之間切換。 請參閱檢視工作執行詳細資料。
- 您現在可以在檢視或編輯工作時,將路徑 (例如筆記本路徑) 複製到任務。 請參閱複製任務路徑。
適用於 Power BI 的 Delta Sharing 連接器
2021 年 11 月 15 日
我們已發行 Power BI Delta Sharing 連接器,使用者可以透過 Delta Sharing 開放式通訊協定來探索、分析和視覺化共用的資料集。 此通訊協定可透過利用 REST 和雲端儲存,跨產品和平台安全地交換資料集。 如需詳細資料,請參閱 Power BI Delta Sharing 連接器。
Databricks ODBC 驅動程式 2.6.19
2021 年 11 月 12 日
我們已發行 Databricks ODBC 驅動程式 2.6.19 版 (下載)。 新的驅動程式會將 Databricks 傳回的 SQL 錯誤條件 (SQLState) 傳播至用戶端。
Databricks Runtime 10.1 和 10.1 ML 已正式發行;10.1 Photon 為公開預覽
2021 年 11 月 10 日
Databricks Runtime 10.1 和 10.1 ML 現已正式發行。 10.1 Photon 處於公開預覽狀態。
請參閱 Databricks Runtime 10.1 (EoS) 和 Databricks Runtime 10.1 for ML (EoS)。
Databricks Runtime 10.1 (搶鮮版 (Beta))
2021 年 11 月 4 日
Databricks Runtime 10.1、10.1 Photon 和 10.1 ML 現在可作為搶鮮版 (Beta) 版本使用。
請參閱 Databricks Runtime 10.1 (EoS) 和 Databricks Runtime 10.1 for ML (EoS) 的完整版本資訊。
重新命名和刪除 MLflow 實驗 (公開預覽)
2021 年 11 月 2-8 日:3.58 版
從實驗頁面重新命名、刪除和變更 MLflow 實驗的權限
你現在複製現有的原則即可建立叢集原則
2021 年 11 月 2-8 日:3.58 版
已新增支援,可藉由複製現有的原則來建立新的叢集原則。 請參閱建立和管理計算原則。
變更筆記本預設語言和筆記本儲存格更輕鬆
2021 年 11 月 2-8 日:3.58 版
新的語言按鈕顯示在筆記本頂端和每個儲存格中。 您可以使用此按鈕來 select 筆記本的默認語言,以及 select 特定儲存格的語言。 如需詳細資訊,請參閱 Set 預設語言 和 Mix 語言。
從網路終端機使用 Repos 中的檔案
2021 年 11 月 2-8 日:3.58 版
您現在可以使用路徑 ,從網路終端機存取/Workspace
。