接下來會有什麼?
瞭解即將推出的 Azure Databricks 版本。
默認在所有新的 Azure Databricks 帳戶上啟用預測優化
在 11 月 11 日,Databricks 會啟用預測優化,作為所有 新 Azure Databricks 帳戶的預設值。 先前,它預設為停用,而且可由您的帳戶管理員啟用。 啟用預測性優化時,Azure Databricks 會自動執行 Unity 目錄受控數據表的維護作業。 如需預測優化的詳細資訊,請參閱 Unity 目錄受控數據表的預測優化。
針對工作流程工作負載的無伺服器計算降低成本和對效能的更多控制
除了目前支持的自動效能優化之外,工作流程優化功能的無伺服器計算增強功能可讓您更充分掌控工作負載是否已針對效能或成本進行優化。 若要深入瞭解,請參閱 筆記本、作業和管線的無伺服器計算節省成本。
AI/BI Genie 啟用預設值的變更
在 2024 年 11 月 14 日,預設會開啟加入 Genie 公開預覽的切換。 若要管理預覽,請參閱 管理 Azure Databricks 預覽。 AI/BI Genie 將於 2024 年 12 月 9 日正式推出,屆時具有更高許可權的使用者,例如帳戶和工作區系統管理員,可以使用可控制 Azure AI 服務支援的 AI 輔助功能的存取權切換來控制 Genie 的存取權。 請參閱使用 Databricks Assistant。
舊版儀錶板版本支持的變更
Databricks 建議使用 AI/BI 儀表板 (先前稱為 Lakeview 儀表板)。 舊版儀錶板,先前稱為 Databricks SQL 儀錶板,現在稱為 舊版儀錶板。 Databricks 不建議建立新的舊版儀表板。 相較於舊版儀錶板,AI/BI 儀錶板提供改良的功能,包括 AI 輔助撰寫、草稿和已發佈模式,以及交叉篩選。
為了協助轉換至最新版本,升級工具可在使用者介面和API中取得。 如需如何在UI中使用內建移轉工具的指示,請參閱 將舊版儀錶板複製到AI/BI儀錶板。 如需使用 AZURE Databricks API 來管理儀錶板的教學課程,請參閱 使用 Azure Databricks API 來管理儀錶板。
對無伺服器計算工作負載屬性的變更
目前,您的計費使用量系統資料表可能包含無伺服器 SKU 計費記錄,其中包含 run_as
、job_id
job_run_id
和 notebook_id
的 Null 值。 這些記錄代表與未直接歸屬於任何特定工作負載的共用資源相關聯的成本。
為了協助簡化成本報告,Databricks 很快就會將這些共用成本歸屬於產生成本的特定工作負載。 您將不會再看到工作負載識別碼欄位中具有 Null 值的計費記錄。 當您增加無伺服器計算的使用量並新增更多工作負載時,帳單上這些共用成本的比例將會隨著在更多工作負載中的共用而減少。
如需監視無伺服器計算成本的詳細資訊,請參閱監視無伺服器計算的成本。
稽核記錄中的 sourceIpAddress 欄位將不再包含連接埠號碼
由於錯誤,某些授權和驗證稽核記錄除了 sourceIPAddress
欄位中的 IP (例如 "sourceIPAddress":"10.2.91.100:0"
) 之外,還包含連接埠號碼。 記錄為 0
的連接埠號碼不會提供任何實際值,且與 Databricks 稽核記錄的其餘部分不一致。 為了增強稽核記錄的一致性,Databricks 計劃變更這些稽核記錄事件的 IP 位址格式。 這項變更將從 2024 年 8 月初逐步推出。
如果稽核記錄包含 0.0.0.0
的 sourceIpAddress
,則 Databricks 可能會停止記錄。
舊版 Git 整合於 1 月 31 日 EOL
在 2024 年 1 月 31 日之後,Databricks 將會移除舊版筆記本 Git 整合。 此功能已在舊版狀態超過兩年,自 2023 年 11 月以來,產品 UI 中已顯示取代通知。
如需移轉至 Databricks Git 資料夾 (先前稱為 Repos) 的詳細資料,請參閱從舊版 Git 整合切換至 Databricks Repos。 如果此移除會影響您,且您需要擴充,請連絡 Databricks 帳戶小組。
將不支援 JDK8 和 JDK11
當 Spark 4.0 發行時,Azure Databricks 規劃隨著下一個主要 Databricks Runtime 版本移除 JDK 8 支援。 Azure Databricks 規劃隨著下一個 Databricks Runtime 14.x 的 LTS 版本移除 JDK 11 支援。
為新工作區自動啟用 Unity Catalog
Databricks 已開始針對新的工作區自動啟用 Unity 目錄。 如此帳戶管理員在建立工作區之後,就不需要設定 Unity 目錄。 正逐步跨帳戶進行推出。
sqlite-jdbc 升級
Databricks Runtime 規劃在所有 Databricks Runtime 維護版本中,將 sqlite-jdbc 版本從 3.8.11.2 升級至 3.42.0.0。 3.42.0.0 版的 API 與 3.8.11.2 不完全相容。 確認您的方法和傳回型別使用 3.42.0.0 版。
如果您在程式碼中是使用 sqlite-jdbc,請檢查 sqlite-jdbc 相容性報告。