共用方式為


DLT 2022.49 發布版本

2022 年 12 月 6 日至 9 日

這些功能和改進功能已於 2022.49 版 DLT 中發行。

此版本所使用的 Databricks 執行時間版本

信道:

  • CURRENT(預設值): Databricks Runtime 11.0.11
  • 預覽:Databricks Runtime 11.3.2

此版本中的新功能和改善

  • 您現在可以將檔案從 Databricks Git 資料夾匯入為 Python 模組。 您可以使用 sys.path.append(),從目前的存放庫路徑或指定的存放庫路徑匯入檔案。
  • 增強型自動調整現已正式推出。 在此版本中,增強型自動縮放是透過用戶介面所建立的新管線的預設自動縮放模式。 Databricks 建議更新使用現有叢集自動縮放的管線,以利用改進的自動縮放功能。
  • 對於以連續模式執行的管線,發生可重試失敗時,預設重試限制現在是 2。 包括初次嘗試在內,當發生非致命失敗時,所有流程會進行三次執行嘗試(指數退避)。 先前,預設值是批次流程的未系結重試,以及串流流程的五次重試。
  • 組態參數 pipelines.maxFlowRetryAttempts 現在適用於所有流程的重試限制,包括批次和串流流程,以及連續或觸發的管線。 先前,pipelines.maxFlowRetryAttempts 套用於觸發模式中的所有重試限制,但在連續模式中僅套用於批次流程;而連續模式中的串流管線重試則由 pipelines.numStreamRetryAttempts控制。 對於現有的管線,pipelines.numStreamRetryAttempts 持續模式的串流流程仍受支援。 如果同時設定 pipelines.numStreamRetryAttemptspipelines.maxFlowRetryAttemptspipelines.numStreamRetryAttempts 會優先處理連續模式的串流流程。 否則,會使用 pipelines.maxFlowRetryAttempts 的已設定值。 請參閱 DLT 屬性參考

此版本中的錯誤修正

  • 此版本修正了錯誤,導致針對已啟用 Photon 的叢集顯示每小時不正確的 DBU 計算。
  • 此版本修正了導致已啟用 Unity 目錄的工作區中的 DLT 維護工作失敗的錯誤。
  • 此版本修正了一個 Bug,即停止或重新啟動使用自動載入器擷取數據的持續管線時,會導致管線掛起數分鐘。