Databricks SQL 版本資訊
本文列出新的 Databricks SQL 功能和改善項目,以及已知問題和常見問題。
發行程序
Databricks 會持續釋出 Databricks SQL Web 應用程式使用者介面的更新,所有使用者都會在短時間內收到所推出的相同更新。
此外,Databricks 通常會定期釋出新的 SQL 倉儲計算版本。 一律提供兩個通道:預覽和目前。
注意
分階段發行。 您的 Databricks 帳戶可能會等到最初發行日期後的一週或是更長時間之後,才會使用新的 SQL 倉儲版本或 Databricks SQL 功能進行更新。
注意
Azure 中國不提供 Databricks SQL Serverless。 Azure Government 區域中無法使用 Databricks SQL。
通道
通道可讓您在目前 SQL 倉儲計算版本或預覽版本之間進行選擇。 預覽版本可讓您先試用之後將成為 Databricks SQL 標準功能的功能。 利用預覽版本,針對即將進行的變更測試生產查詢和儀表板。
一般而言,預覽版本會在發佈至預覽通道大約兩週後提升至目前通道。 例如安全性功能、維護更新以及錯誤修復之類的某些功能,可能會直接發行至目前通道。 Databricks 可能會不時在不同的排程上將預覽版本提升至目前通道。 每個新版本將在下列各節中宣佈。
若要瞭解如何將現有的 SQL 倉儲切換至預覽通道,請參閱《預覽通道》。 使用者介面更新章節中所列的功能與版本資訊修正問題一節中所述的 SQL 倉儲計算版本無關。
可用的 Databricks SQL 版本
目前通道:Databricks SQL 2024.40 版
- 請參閱 <2024.40> 中的功能。
2024年11月21日
SQL 倉儲系統資料表 (公開預覽)
- 數據表
system.compute.warehouses
會在建立、編輯和刪除 SQL 倉儲時記錄。 您可以使用數據表來監視倉儲設定的變更,包括倉儲名稱、類型、大小、通道、標籤、自動停止和自動調整設定。 請參閱 倉儲系統數據表參考。
資料探索
- [ 類別目錄總管] 中的 [歷程] 索引 標籤已經過重新設計,並已改善實體篩選的UI。
2024 年 11 月 13 日
舊版儀錶板:
- 已解決樣板化工具提示未顯示雙軸和多字段座標軸圖表的詳細內容的問題。
2024 年 11 月 6 日
Databricks SQL 串流數據表和具體化檢視的人類可讀取排程支援
用戶現在可以使用CRON排程的人類可讀語法,啟動、建立和改變串流數據表和具體化檢視的排程。 請參閱 ALTER MATERIALIZED VIEW、 ALTER STREAMING TABLE、 CREATE MATERIALIZED VIEW 和 CREATE STREAMING TABLE。
串流數據表現在支持時間移動查詢
您現在可以使用時間移動,根據時間戳或數據表版本來查詢舊版數據表版本(如事務歷史記錄中所記錄)。 您可能需要在使用時間移動查詢之前重新整理串流數據表。 請參閱什麼是 Delta Lake 時間移動?。
具體化檢視不支持時間移動查詢。
2024 年 10 月 31 日
使用者介面更新
新的 SQL 編輯器 (公開預覽)
- 您現在可以使用鍵盤快捷方式
Command
(或Ctrl
) +Shift
+Enter
來執行使用中的 SQL 查詢。 - 當文字在顯示視窗外延伸時,參數輸入區域現在會顯示滾動條。
- 已修正導致查詢配置檔詳細數據頁面無法完全開啟的問題。
- 您現在可以在索引標籤標題中輸入新名稱來重新命名查詢。
- [ 排程] 按鈕現在已針對從未儲存過的查詢停用。
2024年10月24日
AI/BI 工具的版本資訊
AI/BI 儀錶板和 AI/BI Genie 的版本資訊已移至 AI/BI 版本資訊。 未來的版本和更新將會記載於該處。
2024年10月17日
通知目的地現已正式推出
您可以建立及設定工作區使用者可以新增至特定工作流程的通知目的地,例如警示、Databricks 作業和 AI/BI 儀錶板排程,以在事件執行時傳送電子郵件或 Webhook。 請參閱 管理通知目的地。
2024 年 10 月 10 日
具體化檢視和串流數據表現在已在 Databricks SQL 上正式推出
串流數據表可讓您從雲端記憶體和消息佇列進行累加擷取,而具體化檢視則是預先計算的檢視,這些檢視會在新數據送達時自動且以累加方式更新。 請參閱 在 Databricks SQL 中使用具體化檢視和使用 Databricks SQL 中的串流數據表載入數據。
查詢見解
- 新的資料列
query_source
、executed_as
和executed_as_user_id
已新增至查詢記錄系統數據表。 請參閱查詢記錄系統資料表參考。
2024 年 10 月 3 日
無伺服器 SQL 倉儲支援已延長
無伺服器 SQL 倉儲現在可在 swedencentral
區域內使用。 請參閱<區域可用性有限的功能>。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
目錄總管
- AI 產生的註解現在支援目錄、結構描述、磁碟區、模型和函數,而且使用者可以使用內嵌聊天助理來協助編輯其註解。
SQL AI 函數 vector_search()
函數現在可在公開預覽中使用。 請參閱 vector_search 函式
2024 年 9 月 26 日
無伺服器 SQL 倉儲支援已延長
無伺服器 SQL 倉儲現在可在 francecentral
區域內使用。 請參閱<區域可用性有限的功能>。
2024 年 9 月 11 日
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
SQL 編輯器
您現在可以在 SQL 編輯器中使用具名參數標記語法。 具名參數標記語法可用於 SQL 編輯器、Notebooks 和 AI/BI 儀表板。 請參閱<使用查詢參數>。
查詢和舊版儀表板
針對 SQL 查詢和舊版儀表板,已刪除的項目不再出現在清單頁面中。 在工作區垃圾桶資料夾中尋找已刪除的項目。 工作區管理員可檢視所有使用者垃圾桶資料夾中已刪除的項目。
2024 年 9 月 5 日
2024.40 的變更
Databricks SQL 2024.40 版包含下列行為變更、新功能和改進功能。
行為變更
變更為用於檢視的預設結構描述繫結模式
檢視現在會透過使用結構描述補償搭配一般投射規則,因應基礎查詢中的結構描述變更。 這是與
BINDING
模式先前預設值不同的變更,在參考檢視時無法執行安全投射時會引發錯誤。請參閱<CREATE VIEW> 和 <cast 函式>。
不允許使用未記載的
!
語法,而是使用NOT
外部布林運算式在此版本中,不再允許使用
!
做為NOT
外部布林運算式的同義字。 舉例來說,例如下列的陳述式:CREATE ... IF ! EXISTS
, IS !NULL、! NULL
資料欄或欄位內容! IN
以及 !BETWEEN,必須取代為:CREATE ... IF NOT EXISTS
、IS NOT NULL
、NOT NULL
資料欄或欄位內容NOT IN
和NOT BETWEEN
。這項變更可確保一致性、符合 SQL 標準,並讓您的 SQL 更具可攜性。
布林值前綴運算子
!
(例如!is_mgr
或!(true AND false)
)不受這項變更影響。不允許檢視中未記載的資料欄定義語法
Databricks 支援 CREATE VIEW,其中包含具名資料欄和資料欄註解。 先前已經允許資料欄類型、
NOT NULL
限制式或DEFAULT
的規格。 在此版本中,您無法再使用此語法。這項變更可確保一致性、符合 SQL 標準,並且支援未來的增強功能。
在無效的資料欄中新增
CHECK
限制式現在會傳回UNRESOLVED_COLUMN.WITH_SUGGESTION
錯誤類別為提供更實用的錯誤訊息,在 Databricks Runtime 15.3 和更新版本中,
ALTER TABLE ADD CONSTRAINT
包含參考無效欄名稱的CHECK
限制式的陳述式會傳回 UNRESOLVED_COLUMN.WITH_SUGGESTION 錯誤類別。 先前已傳回INTERNAL_ERROR
。
新功能和改進
使用 ALTER TABLE 啟用 UniForm Iceberg
您現在可以在現有的資料表上啟用 UniForm Iceberg,不需重寫資料檔。 請參閱<藉由變更現有的資料表啟用>。
UTF-8 驗證函式
此版本引進下列函式來驗證 UTF-8 字串:
- is_valid_utf8 驗證字串是否為有效的 UTF-8 字串。
- make_valid_utf8 使用替代字元將可能無效的 UTF-8 字串轉換成有效的 UTF-8 字串
- 如果輸入不是有效的 UTF-8 字串,validate_utf8 會引發錯誤。
- 如果輸入不是有效的 UTF-8 字串,try_validate_utf8 會傳回
NULL
。
to_avro和from_avro函式
to_avro和from_avro函式允許將 SQL 類型轉換成 Avro 二進位數據並返回。
try_url_decode 函式
此版本引進會解碼 URL 編碼字串的 try_url_decode 函式。 如果字串的格式不正確,函式會傳回
NULL
而不是引發錯誤。選擇性地允許最佳化工具依賴未執行的外部索引鍵限制式
若要改善查詢效能,在 CREATE 或是 ALTER 資料表中,您現在可以指定有關
RELY
限制式的FOREIGN KEY
關鍵字。支援刪除檢查限制式資料表功能
使用
replaceWhere
的選擇性覆寫現在可執行同時刪除資料以及插入新資料的作業,以改善查詢效能和叢集使用率。針對選擇性覆寫執行的平行作業
使用
replaceWhere
的選擇性覆寫現在可執行同時刪除資料以及插入新資料的作業,以改善查詢效能和叢集使用率。已經改善使用選擇性覆寫變更資料摘要的效能
在具有變更資料摘要的資料表使用
replaceWhere
的選擇性覆寫,已經不再針對插入資料寫入個別的變更資料檔。 這些作業會使用存在於基礎 Parquet 資料檔中的隱藏_change_type
欄以記錄變更,而不進行寫入放大。已經改善 COPY INTO 命令的查詢延遲
此版本包含可改善
COPY INTO
命令查詢延遲的變更。 本次改善是藉由讓 RocksDB 狀態儲存區以非同步方式載入狀態所實施。 藉由這項變更的協助,您應該會看到有大型狀態的查詢在開始時間方面有所改善,例如具有大量已內嵌檔案的查詢。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
視覺效果
- 工具提示總計現在只會針對堆疊圖表顯示。
2024 年 8 月 22 日
視覺效果
針對群組和多欄位組態,工具提示現在會在您將滑鼠指標停留在圖表元素上方時顯示總計。
2024 年 8 月 15 日
視覺效果
修正了變更頁面大小之後,資料表視覺效果中的資料列編號未更新的問題。
資料探索
現在支援在 Unity Catalog 資料表中展開和折疊巢狀複雜資料欄類型的功能。
2024 年 8 月 1 日
視覺效果:
- 由於篩選而變更資料時,現在會保留資料表排序。
SQL 編輯器:
- 藉由在查詢的最後一行與結果輸出之間新增額外的填補,以提高可讀性。
2024 年 7 月 25 日
Databricks REST API:
- 用於管理查詢、警示、資料來源和權限的 API 已變更。 舊版將繼續支援六個月。 此轉換期間旨在讓您有足夠的時間將應用程式和整合移轉至新版本,再逐步淘汰舊版。請參閱<更新至最新的 Databricks SQL API 版本>
2024 年 7 月 18 日
使用者介面更新
目錄總管:
- 建立目錄時,現在有新的目錄設定精靈可用來設定工作區繫結、目錄權限和中繼資料。
SQL 倉儲監視:
- CAN MONITOR 權限現已正式發行。 它能夠讓有權限的使用者監視 SQL 倉儲,包括相關的查詢歷程記錄和查詢設定檔。 請參閱 向量搜尋端點 ACL。
2024 年 7 月 11 日
Databricks SQL 2024.35 版現已可用
推出排程:2024.35 預覽版推出時間:7 月 9 日至 7 月 15 日之間
2024.35 的變更
使用卸除功能停用欄對應
您現在可以使用 DROP FEATURE
停用 Delta 資料表上的欄對應,並且降級資料表通訊協定。 請參閱<停用欄對應>。
公開預覽中的變化類型語法和函式
使用半結構化資料做為 VARIANT
類型的內建 Apache Spark 支援現在可在 Spark DataFrame 和 SQL 中使用。 請參閱<查詢變化資料>。
公開預覽中 Delta Lake 的變化類型支援
您現在可以使用 VARIANT
,將半結構化資料儲存在 Delta Lake 支援的資料表中。 請參閱<Delta Lake 中的變化支援>。
支援檢視中結構描述演進的不同模式
CREATE VIEW 和 ALTER VIEW 現在可讓您設定結構描述繫結模式,增強檢視如何處理基礎物件中的結構描述變更。 這項功能可讓檢視容許或調整基礎物件中的結構描述變更。 它解決了查詢結構描述中因修改物件定義而產生的變更。
某些視窗函式的效能改善
此版本包括改善了某些 Spark 視窗函式效能的變更,特別是不包含 ORDER BY
子句或 window_frame
參數的函式。 在這些情況下,系統可以重寫查詢,以便使用彙總函式執行查詢。 這項變更可讓查詢使用部分彙總加快執行速度,同時避免執行視窗函式的額外負荷。 Spark 組態參數 spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
會控制此最佳化,且根據預設會設定為 true
。 若要關閉此最佳化,請將 spark.databricks.optimizer.replaceWindowsWithAggregates.enabled
設定為 false
。
已新增對 try_mod
函式的支援
此版本新增對 PySpark try_mod()
函式的支援。 此函式透過將兩個數值相除,支援整數餘數的 ANSI SQL 相容計算。 如果除數引數為 0,則 try_mod()
函式會傳回 null,而不是擲回例外。 您可以使用 try_mod()
函式,而不是使用 mod
或 %
,如果除數引數為 0 同時已啟用 ANSI SQL,則會擲回例外。
使用者介面更新
SQL 編輯器:
內嵌助理現在可在 SQL 編輯器中使用。 按一下編輯器方塊中的助理圖示可切換輸入。 以英文輸入問題或註解,然後按 Enter 鍵(不是按 Shift+Enter,這樣會執行查詢),以便直接在編輯器中產生具有不同檢視的回覆。
平台:
通知目的地的 API 現已可供使用。 您現在可以針對警示和作業執行通知,以程式設計方式管理 Webhook 以及電子郵件目的地。 請參閱《通知目的地》。
2024 年 7 月 4 日
Databricks SQL 2024.30 版現已可用
推出排程:2024.30 預覽版推出時間:7 月 9 日至 7 月 15 日之間
2024.30 的變更
Lakehouse Federation 已正式發行 (GA)
下列資料庫類型的 Lakehouse 同盟連接器現已正式發行 (GA):
- MySQL
- PostgreSQL
- Amazon Redshift
- Snowflake
- Microsoft SQL Server
- Azure Synapse (SQL 資料倉儲)
- Databricks
此版本也引入了下列改善:
支援 Snowflake 和 Microsoft SQL Server 連接器中的單一登入 (SSO) 驗證。
來自無伺服器計算環境的 SQL Server 連接器中的 Azure Private Link 支援。 請參閱<步驟 3:建立私人端點規則>。
對於其他下推(字串、數學、其他函式)的支援。
已改善不同查詢圖形的下推成功率。
其他下推偵錯功能:
EXPLAIN FORMATTED
輸出會顯示下推查詢文字。- 查詢設定檔 UI 會顯示下推查詢文字、聯合節點識別碼和 JDBC 查詢執行次數 (詳細資訊模式)。 請參閱<檢視系統產生的同盟查詢>。
DESCRIBE HISTORY
現在會顯示用於使用液體叢集資料表的叢集資料欄
當您執行 DESCRIBE HISTORY
查詢時,operationParameters
欄預設會顯示用於 clusterBy
和 CREATE OR REPLACE
作業的 OPTIMIZE
欄位。 對於使用液體叢集的 Delta 資料表,clusterBy
欄位會填入資料表的叢集欄。 如果資料表不使用液體叢集,則欄位會是空的。
對於主要和外部索引鍵的支援已正式發行
對於 Databricks Runtime 中主索引鍵和外部索引鍵的支援已正式發行。 GA 版本包含下列使用主索引鍵和外部索引鍵所需權限的變更:
- 若要定義外部索引鍵,您必須對於包含外部索引鍵所參考的主索引鍵的資料表擁有
SELECT
權限。 您不需要擁有包含主索引鍵的資料表,但是過去則需要擁有。 - 使用
CASCADE
子句刪除主索引鍵不需要定義參考主要索引鍵的外部索引鍵的資料表權限。 過去您則需要擁有參考資料表。 - 刪除包含限制式的資料表現在需要與刪除不包含限制式的資料表擁有相同權限。
若要瞭解如何將主要和外部索引鍵與資料表或檢視搭配使用,請參閱 CONSTRAINT 子句、ADD CONSTRAINT 子句和 DROP CONSTRAINT 子句。
液體叢集是 GA
現在已使用 Databricks Runtime 15.2 和更新版本正式發行對液體叢集的支援。 請參閱<針對差異資料表使用液態叢集>。
類型擴大處於公開預覽狀態
您現在可以在 Delta Lake 支援的資料表上啟用類型擴展。 啟用類型擴展的資料表允許將資料欄類型變更為較寬的資料類型,而不需要重寫基礎資料檔。 請參閱類型擴展。
已新增至 SQL 合併語法的結構描述演進子句
您現在可以將 WITH SCHEMA EVOLUTION
子句新增至 SQL 合併陳述式,以便啟用作業的結構描述演進。 請參閱<合併的結構描述演進語法>。
Vacuum 詳細目錄支援
在 Delta 資料表上執行 VACUUM
命令時,您現在可以指定要考慮的檔案詳細目錄。 請參閱 <OSS Delta 文件>。
支援 Zstandard 壓縮函式
您現在可以使用 zst_compress、zstd_decompress 和 try_zstd_decompress 函式壓縮與解壓縮 BINARY
資料。
SQL UI 中的查詢計劃現在已正確顯示 PhotonWriteStage
在 SQL UI 中顯示時,查詢計劃中的 write
命令會錯誤地將 PhotonWriteStage
顯示顯示為運算子。 在此版本中,UI 已更新成將 PhotonWriteStage
顯示為階段。 這只是 UI 變更,不會影響執行查詢的方式。
使用者介面更新
API 支援:
- 您現在可以使用 REST API 管理通知目的地。 請參閱《通知目的地》。
2024 年 6 月 27 日
Databricks SQL 具體化檢視和串流數據表中的數據列篩選和數據行遮罩為公開預覽
Databricks SQL 具體化檢視和串流數據表中的數據列篩選和數據行遮罩為 公開預覽。 此公開預覽發行版本包含下列變更:
您可以將資料列篩選和資料欄遮罩新增至 Databricks SQL 具體化檢視或串流資料表。
- 您可以在包含資料列篩選和資料欄遮罩的資料表上定義 Databricks SQL 具體化檢視或串流資料表。
使用者介面更新
視覺效果:
- 已改善滑鼠指標在具有許多資料點的圓形圖、散佈圖和熱度圖上停留時顯示工具提示的互動性。
目錄總管:
- 經過改造的目錄總管 UI 可讓您更輕鬆地從 [快速存取] 檢視中找到最新的 Unity Catalog 資產並且加到我的最愛。 瀏覽體驗同時也已簡化,可讓您使用畫面左上角的 [設定] 探索計算、儲存、認證、連線、DBFS 和管理詳細資料。 Delta Sharing、Clean Rooms 以及 External Data 現在已經有專屬頁面。
2024 年 6 月 6 日
Databricks SQL 的具體化檢視和串流資料表的修正
導致 Databricks SQL 具體化檢視和串流資料表產生 ALTER SCHEDULE
查詢的問題只有在修正下個 REFRESH 作業之後才會生效。 現在會立即套用 ALTER SCHEDULE
查詢。 請參閱<排程具體化檢視重新整理>。
Databricks SQL 中的具體化檢視和串流資料表為公開預覽
Databricks SQL 中的具體化檢視和串流資料表是公開預覽,可供所有客戶使用。 此公開預覽發行版本包含下列變更:
Databricks SQL 中具體化檢視和串流資料表的
REFRESH
現在預設為同步。 請參閱<重新整理(具體化檢視和或串流資料表)>。- Databricks SQL 具體化檢視或串流資料表的重新整理操作期間發生的錯誤會在 SQL 編輯器 中傳回。
若要瞭解如何在 Databricks SQL 中使用具體化檢視和串流資料表,請參閱 <在 Databricks SQL 中使用具體化檢視>和<在 Databricks SQL 中使用串流資料表載入資料>。
使用者介面更新
儀表板:
- 帳戶使用者現在可以從已發佈的儀表板下載視覺效果資料
- 未發佈的儀表板現在可以使用儀表板頂端附近的 [草稿/發佈] 下拉式清單發佈。
- 已修正未偵測到參數具名限制的問題。
視覺效果:
- 已改善深色模式的箱形圖 (box-plot) 呈現。
查詢深入解析:
- 對於連結至 SQL 倉儲的所有筆記本,您可以按下包含查詢的儲存格底下的 [查看效能] 以存取查詢設定檔。 如果儲存格包含多個查詢,則會針對每個陳述式提供每個查詢設定檔的連結。
2024 年 5 月 30 日
SQL 倉儲新的權限等級
可以監視權限能夠讓使用者監視 SQL 倉儲,包括相關的查詢歷程記錄和查詢設定檔。 可以監視權限現在處於公開預覽狀態。 請參閱 向量搜尋端點 ACL。
使用者介面更新
儀表板改善:
- 已將 Kebab 功能表新增至儀表板小工具,以便下載影像和資料。
- 使用者可以將舊版儀表板查詢支援的參數和下拉式清單參數移轉至儀表板。
2024 年 5 月 23 日
使用者介面更新
- 您現在可以選取工作區中的多個項目來移動或刪除。 選取多個物件時,將會出現動作列,並且提供移動或刪除項目的選項。 此外,您可以使用滑鼠選取多個項目,並將這些項目拖曳至新的位置。 對於物件的現有權限仍可在大量移動和刪除作業期間套用。
- 您現在可以在目錄總管和結構描述瀏覽器中將 Unity 目錄資產標示為我的最愛。 這包括目錄、結構描述、資料表、模型、磁碟區和函式。 您可以從 Azure Databricks 首頁輕鬆存取您標示為我的最愛的 Unity 目錄資產。
儀表板更新:
- 雙軸組合圖現在會正確地在右軸和線條圖例上顯示橫條圖圖例。
- 雙軸圖表現在可正確地在橫條圖上顯示標籤。
視覺效果更新:
- 資料表編輯器的 if 和 then 條件式格式標籤現在可支援深色模式。
- 備援的 [開啟連結] 圖示已從資料表編輯器的格式工具提示中移除。
- 資料表編輯器中預設字型色彩的標籤現在會自動對齊。
2024 年 5 月 16 日
推出排程
- 2024.25 預覽版推出時間:完成日期為 5 月 1 日
- 2024.25 目前版推出時間:5 月 14 日至 5 月 21 日之間完成
注意
升級至 panda Python 媒體櫃(2.0.3 版)造成 Databricks SQL 2024.20 版發生重大變更。 Azure Databricks 未將 2024.20 版推出至目前通道。 而是於 2025 年 5 月 1 日將預覽通道升級至 2024.25。 目前通道推出從 2024.15 直接跳至 2024.25。
2024.25 的變更
資料控管
認證傳遞和 Hive 中繼存放區資料表存取控制已被取代
認證傳遞和 Hive 中繼存放區資料表存取控制是舊版資料控管模型。 升級至 Unity 目錄以藉由提供集中位置來管理和稽核帳戶中多個工作區的資料存取,簡化資料的安全性和控管。 請參閱什麼是 Unity Catalog?。
即將推出的 DBR 版本將會移除對於認證傳遞和 Hive 中繼存放區資料表存取控制的支援。
SQL 語言功能
WHERE 子句現在可支援 * (star) 子句。
您現在可以使用 WHERE
子句中的 star (*
) 子句來參考 SELECT
清單中的所有資料欄。
例如:SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*)
。
支援 Cloudflare R2 儲存體,避免自 2024.15 以來的跨區域 Egress 費用
您現在可以使用 Cloudflare R2 做為 Unity Catalog 中註冊資料的雲端儲存。 Cloudflare R2 主要適用於差異共用使用案例,可讓您在跨區域傳輸資料時,避免雲端提供者收取的資料輸出費用。
Cloudflare R2 儲存體支援 Azure Data Lake Storage Gen2 中支援的所有 Databricks 資料和 AI 資產。
請參閱使用 Cloudflare R2 複本或將儲存體移轉至 R2 和建立儲存體認證以便連線至 Cloudflare R2。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
資料探索更新:Hive 中繼存放區至 Unity 目錄更新精靈支援使用所有用途計算或 SQL 倉儲升級 Hive 中繼存放區受控資料表。 更新 20 個以上的資料表會建立新的筆記本,其中包含執行轉換的 SYNC
AND ALTER TABLE
命令。
儀表板更新:
- 雙軸功能現在可用於區域、橫條圖、折線圖和散佈圖類型。
- 當您啟用雙軸圖表時,不會再將軸標題和範圍複製到次要軸。
- 視覺效果設定中識別的最後一個欄位會自動重新定位至右側 y 軸。
2024 年 5 月 9 日
SQL 編輯器修正:
- 管理員設定結果資料表剪貼簿功能現在會套用至 SQL 編輯器的新增結果資料表。
儀表板改善:
- 基於查詢的參數可允許作者定義可選取值的清單,讓檢視人員可以用來做為儀表板創作區上其他視覺效果的參數。 請參閱<使用查詢型參數>。
- 現在會保留從資料表小工具下載之檔案中的資料欄順序。
- 資料表編輯器現在包含顯示資料欄名稱的暫留工具提示。
- 從其他視覺效果類型切換至色階分佈圖時,現在資訊編碼能夠獲得更妥善地保存。
儀表板修正:
- 已修正單一方格高度篩選顯示不必要的溢位捲軸的問題。
- 已修正在已刪除參考資料集欄的發行儀表板上造成不正確呈現視覺效果的問題。
2024 年 5 月 2 日
儀表板更新:
- 現在可以將查詢和視覺效果從 SQL 編輯器複製到新的儀表板。 您仍然可以從 SQL 編輯器將視覺效果新增至舊版儀表板。 請參閱<編輯、下載或新增至儀表板>。
- 儀表板現在會維護 24 小時的結果快取,以最佳化初始載入時間。 請參閱<資料集最佳化和快取>。
- 具有類別 X 和量化 Y 的橫條圖現在會在 Databricks 助理回應中排序。
- 已更正舊版色階分佈圖
COUNT (*)
的移轉問題,確保移轉正確無誤。 - 已實施在篩選小工具中混合數值類型和日期類型的能力。
- 建立圖表時,Databricks 助理現在會在您輸入時自動建議相關的資料欄。
視覺效果更新:
- 資料表的使用者選取色彩現在會在舊版圖表中跨淺色和深色模式保存。
- 已改善資料截斷邏輯,以增強組合圖、圓形圖、熱度圖和色階分佈圖圖表的效能。
- 基本圖表的量化軸頂端現在一律會顯示刻度標記。
2024 年 4 月 23 日
UI 更新:
- 針對 UI 中所有 [共用] 對話方塊,已經將
All Users
群組重新命名為All Workspace Users
。 新名稱更準確地反映群組的範圍,該群組一律包含指派給工作區的使用者。 不會變更群組成員資格做為此重新命名的一部分。
儀表板改善:
- 當儀表板的 SQL 倉儲啟動時,會出現說明等待時間的對話方塊。
- 在 [畫布] 和 [資料] 索引標籤之間切換時,會保留捲動位置。
- 複製舊版儀表板以建立 Lakeview 儀表板現在可支援一些參數轉換。 請參閱<調整舊版參數>。
- 日期和日期時間參數現在可支援相對日期,例如 [今天]、[明天] 和 [7 天前]。
- 可以將數字範圍滑桿新增為儀表板上的篩選。
- 色階分佈圖現在可以顯示分類式資料。
- 散布圖現在可支援大小編碼。
儀表板修正:
- 時態性色彩編碼現在可以正確變更色彩指派。
視覺效果更新:
- 自訂工具提示格式現在可在多軸圖表中正確運作。
- 當使用者在過去 14 天內並未變更切換時,會移除 [新圖表] 預覽標籤。
2024 年 4 月 18 日
Lakeview 儀表板已正式發行
Lakeview 儀表板現在是預設的儀表板工具。 它們在 UI 中已經重新命名為 [儀表板]。 Databricks SQL 儀表板現在稱為 [舊版儀表板]。 相關 API 工具的名稱尚未變更。
- 儀表板改善:
- 已提供稽核記錄供 Lakeview 儀表板使用。 請參閱<儀表板事件>。
- 從儀表板下載的資料會保留已套用的參數。
- Databricks 助理會在 [資料] 索引標籤中啟用,而不需要先新增資料集。
- 具有多個 Y 欄位的堆疊橫條圖可以支援根據 Y 軸值總和以排序 X 軸。
- 在視覺效果軸功能表中的 [線性] 與 [記錄 (對稱)] 縮放功能之間切換。
- 篩選小工具的預設大小現在更精巧。
- 文字輸入篩選小工具的初始載入時間已經減少。
- 已改善從舊版儀表板移轉時的自動圖表轉換。
- 儀表板修正:
- 受限制的檢視設定警告不會顯示儀表板是否已與其他人共用。
- [資料] 索引標籤 SQL 編輯器中的錯誤訊息現在已啟用深色模式。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
改善:
- 堆疊圖表上的工具提示現在預設會顯示堆疊值和百分比。
- 多軸圖表的工具提示現在會以高亮顯示停留的項目。
- 在 SQL 編-輯器中編輯時,Databricks SQL 的 [資料表] 視覺效果現在可適應新的查詢結果資料類型。
- 目錄總管的 [查詢歷程記錄] 資料表會顯示 [查詢來源] 屬性的樹狀檢視。 您可以使用此項目查看哪些實體已觸發要執行的查詢陳述式。
2024 年 4 月 11 日
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
改善:
- 在 Databricks SQL 和 Notebooks 中建立視覺效果時,您現在可以按百分比分組。
- 針對新的圖表(在公開預覽中),您可以按下並拖曳與軸平行的直線,沿著單一軸進行放大。
- Unity Catalog 共用叢集 [Allowlist] UI 現已正式發行。 您可以在目錄總管的中繼存放區詳細資料頁面存取。 請參閱<如何將項目加入允許清單>。
- 建立和編輯外部位置的表單現在會以完整頁面開啟。 它們會包括包含儲存體認證的選項。
修正:
- 已更正色階分佈圖圖表中負值錯誤地標示為正數的問題。
2024 年 4 月 4 日
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
改善:
Lakeview 儀表板上色階分佈圖圖表的改善。
- 已新增對標籤的支援。
- 在不同的欄位之間切換時,現在會保留間隔設定。
儀表板清單頁面上的範例庫現在會建立 Lakeview 儀表板。 請參閱教學課程:使用範例儀表板。
以滑鼠右鍵按一下 Lakeview 儀表板上小工具的框線會開啟特色選單。
左側導覽列會保留給檢視已發佈 Lakeview 儀表板的工作區使用者。
在已發佈和草稿 Lakeview 儀表板之間進行瀏覽時,會保留篩選選取項目。
從草稿 Lakeview 儀表板的 [草稿] 索引標籤編輯查詢時,現在可以將資料欄名稱插入 SQL 編輯器。
取代 Lakeview 儀表板會保留現有的儀表板名稱,並且取代內容。
在熱度圖與其他圖表類型之間切換視覺效果時,現在會更妥善地保留相關欄位。
修正:
- 具有色彩編碼的橫條圖現在已正確限制新增多個 Y 軸欄位。
- 已解決某些視覺效果遺漏 [下載為 PNG] 按鈕的問題。
- 已更正負值大型整數的格式設定先前缺少數千個分隔符號的問題。
- 已修正在折線圖上將滑鼠指標停留在標籤上方時,停留線條佈局不正確的問題。
2024 年 3 月 28 日
Databricks SQL 2024.15 版現已可用
推出排程
- 2024.15 預覽版推出時間:2 月 14 日至 3 月 4 日之間
- 2024.15 目前版推出時間:3 月 25 日至 4 月 8 日
2024.15 的變更
Delta 更新
- Delta UniForm 現已正式發行: UniForm 現已正式發行,並使用 IcebergCompatV2 資料表功能。 您現在可以在現有的資料表上啟用或升級 UniForm。 請參閱<使用 UniForm 來讀取 Delta 資料表與 Iceberg 使用者端>。
- 重新計算略過 Delta 資料表統計資料的資料:您現在可以在變更用於略過資料的資料欄之後,重新計算儲存在 Delta 記錄中的統計資料。 請參閱<指定 Delta 統計資料資料欄>。
SQL 語言更新
- 在 SQL 工作階段中宣告暫存變數: 此版本引入了在工作階段中宣告臨時變數的功能,可以設定這些臨時變數,然後在查詢中引用這些臨時變數。 請參閱<變數>。
- 原生 XML 檔案格式支援(公開預覽): 原生 XML 檔案格式支援現在處於公開預覽狀態。 XML 檔案格式支援可允許擷取、查詢和剖析 XML 資料,以進行批次處理或串流處理。 它可以自動推斷和演進結構描述和資料類型、支援 SQL 運算式(例如
from_xml
),並且可以產生 XML 文件。 它不需要外部 jar,並且可與自動載入器、read_files
、COPY INTO
和 Delta Live 資料表搭配運作。 請參閱<讀取和寫入 XML 檔案>。
Apache Spark SQL 更新
Databricks SQL 2024.15 包含 Apache Spark 3.5.0。 Databricks Runtime 14.3 版本資訊會列出 SQL 的其他錯誤修正和改善。 請參閱<Apache Spark> 並尋找 [SQL]
標籤以取得完整清單。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
目錄總管實體頁面中的新概觀索引標籤會顯示重要的中繼資料,例如檔案化、資料來源、擁有者、資料表結構描述結構描述和註解。
Lakeview 儀表板更新:
- Lakeview 儀表板現在支援參數。 作者可以從 [資料] 索引標籤將參數新增至資料集查詢,然後使用單一值選取器和日期選擇器在創作區上設定參數。 請參閱<使用儀表板參數>。
- 工作區權限 API 現在支援 Lakeview 儀表板。 請參閱 REST API 參考中的 PATCH /api/workspace/workspace/updatepermissions。
- 創作區上的控制項小工具已重新命名為篩選小工具。
- 組合圖不再允許 X 軸上的分類式欄位。
- 共用對話方塊中的 [複製連結] 按鈕現在包含儲存在 URL 中的參數。
- 已發行儀表板上的小工具在滑鼠指標停留時不再顯示框線。
- 已解決 Databricks 助理和下載 PNG 按鈕與圖表視覺物件重疊的問題。
在熱度圖與其他圖表類型之間切換視覺效果,現在會更妥善地保留相關欄位。
具有色彩編碼的橫條圖現在已正確限制新增多個 Y 軸欄位。
2024 年 3 月 21 日
- Unity 目錄模型譜系現在處於公開預覽狀態。
目錄總管中的資料表檢視現在有 [概觀] 索引標籤可描述其主要中繼資料。
- 適用於 Notebooks 的 SQL 倉儲現已正式發行,可讓您在筆記本豐富、共同作業的撰寫環境中,利用 SQL 工作負載的完全受控、立即和可調整計算。 請參閱<將筆記本搭配 SQL 倉儲使用>。
下列修正與改善適用於 Lakeview 儀表板:
- Lakeview 的擴充 API 支援可新增建立、取得、更新和清除儀表板的功能。 請參閱 REST API 參考中的 Lakeview。
- 已在 [資料] 索引標籤的 [目錄] 瀏覽器新增重新整理按鈕。
- [Lakeview 儀表板] 現在會出現在工作區側邊欄的 [新增] 功能表中的 [儀表板] 之前。 在儀表板清單頁面上,[Lakeview 儀表板] 索引標籤顯示在 [儀表板] 索引標籤的左側。
- 適用於 Lakeview 的 Databricks 助理經驗已更新為輸入方塊和建議,以改善可探索性,並幫助使用者理解他們可以提出的提示。
- Lakeview 視覺效果現在支援中位數彙總。
- 已更新 Lakeview 儀表板視覺效果編輯器中的色彩選擇器,以取得建立資料表時更簡化的使用者體驗。
- 改善圓形圖移轉,以獨佔支援角度或色彩定義的案例。
- 修正了防止依圖表命名計數分組的錯誤。 圖表現在可以依具名的 [計數] 的欄位分組。
- 對於橫條圖,當不適用於使用者選取的組態時,現在會隱藏 [群組] 和 [堆疊] 配置控制項。
2024 年 3 月 14 日
對於 Lakeview 儀表板:
色階分佈圖現在支援自訂類別色彩。
- 熱度圖現在支援量化縮放。
- 在視覺效果類型之間切換時,會保留標題和描述,包括組合圖。
- 您現在可以在草稿儀表板小工具上按一下滑鼠右鍵,開啟與草稿儀表板小工具關聯的基礎資料集。 資料集會在 [資料] 索引標籤中開啟。
新的圖表現在會針對數值資料欄中的 Null 值套用別名和自訂色彩。
新的圖表現在會轉譯刻度標記,以顯示 Y 軸的頂端。
2024 年 3 月 7 日
在目錄總管中檢視資料表時,[建立] 按鈕會包含一個建立 Lakeview 儀表板 (而不是 Databricks SQL 儀表板) 的選項。
色階分佈圖現在可供 Lakeview 儀表板使用。 色階分佈圖通常用於可視化數值欄位的分佈。
複製 Databricks SQL 儀表板以建立 Lakeview 儀表板時,資料集轉換問題現在會顯示為 Lakeview 儀表板上新小工具的錯誤。
當數值欄位用於 Lakeview 儀表板上的視覺效果時,可以使用色彩漸層。
指定依欄位色彩時,現在會在 Lakeview 儀表板視覺效果編輯器中公開色彩漸層。
如果檢視者在草稿 Lakeview 儀表板上缺少編輯權限,則與視覺效果相關聯的標題和描述將不再顯示可編輯。
修正了圖表中超過 100 個數列的工具提示錯誤顯示所有數列的問題。 現在,只會顯示焦點數列。
透過效能最佳化,在 SQL 編輯器中減少 30% 的輸入延遲。
在 SQL 編輯器中管理查詢時,將查詢移至回收站會自動關閉索引標籤。
修正了在調整側邊面板寬度時意外選取文字的SQL編輯器中的問題。
2024 年 2 月 29 日
目錄總管中的結構描述瀏覽器現在會顯示資料欄主索引鍵和外部索引鍵限制式。
目錄總管中 [譜系] 索引標籤中顯示的保留時間已增加到一年。
Notebooks 中新圖表上的工具提示現在一律會在視覺效果邊界內呈現。
瞭解如何使用 REST API 以程式設計方式管理 Lakeview 儀表板。 請參閱使用工作區 API 管理儀表板。
Lakeview 儀表板現在支援色階分佈圖。
已改善在 Lakeview 儀表板中的共用和發佈:
- 改善的共用和發佈對話方塊,允許安全且輕鬆地與任何帳戶使用者共用。
- 從工作區瀏覽器開啟的儀表板,如果已存在,會顯示已發佈的儀表板。 檢視者現在可以查看最新發行版本的詳細資料,包括發行者、時間和認證。
- 針對編輯器,Lakeview 儀表板 UI 中的新下拉式切換器可讓您在草稿和已發佈的版本之間快速移動。
2024 年 2 月 22 日
目錄總管資料表檢視中的 [範例資料] 索引標籤的改善可讓您排序資料欄,將選取的資料 [複製] 到剪貼簿,以及檢視行號。 它現在可以更清楚地顯示特殊值,例如 JSON 物件、日期、數值和 Null 值。
Lakeview 儀表板現在支援將儀表板的定期 PDF 快照集傳送給工作區使用者和通知目的地。 請參閱<排程和訂用帳戶>。
Lakeview 下拉式選擇器中的視覺效果選項清單現在會按字母順序排序。
將 Databricks SQL 儀表板複製到 Lakeview 儀表板時,無法轉換的 Widget 現在會顯示視覺效果設定選擇器,而不是錯誤訊息。
2024 年 2 月 15 日
已移除程式代碼型查詢篩選的文件,例如
SELECT action AS 'action::filter'
。 Databricks 建議更新查詢以移除此模式。若為 Lakeview 儀表板,當未指定角度欄位時,圓形圖現在會顯示大小相等的配量。
Lakeview 現在支援組合圖,結合橫條圖和折線圖,在相同的圖表上顯示兩個不同的值。
熱度圖圖表現在可在 Lakeview 中使用色彩強度以顯示兩個離散變數之間的相互關聯程度。
2024 年 2 月 8 日
- 您現在可以在開啟沒有權限的 Lakeview 儀表板連結時要求存取權。
- Lakeview 儀表板篩選現在具有明確的 [全部] 和 [無] 選項。 作者可以選擇在單一選取篩選中隱藏 [全部] 選項。
- 您現在可以在 Lakeview 儀表板圖表上設定軸的最小值和最大值。
2024 年 2 月 1 日
Databricks SQL 2024.10 版現已可用
推出排程
- 2024.10 預覽版推出時間:2024 年 1 月 30 日至 2024 年 2 月 5 日之間
- 2024.10 目前版推出時間:2023 年 2 月 13 日至 2024 年 2 月 20 日之間
2024.10 的變更
- 已修正 DML 命令中的損毀檔案處理: DML 命令
DELETE
、UPDATE
和MERGE INTO
不再遵守讀取選項ignoreCorruptFiles
和ignoreMissingFiles
。 在資料表中遇到無法讀取的檔案時,即使指定了這些選項,這些命令現在仍會失敗。 - 資料列層級並行存取已正式發行,且預設為開啟: 資料列層級並行並行存取會藉由偵測資料列層級的變更來減少並行寫入作業之間的衝突。 只有資料表不支援資料列層級並行存取,但不含資料分割,其中包括具有液體叢集的資料表。 在已啟用刪除向量的 Delta 資料表上,預設會啟用資料列層級並行存取。 請參閱<資料列層級並行寫入衝突>。
- Unity 目錄外部表格的淺複製(公開預覽): 您現在可以搭配 Unity 目錄外部表格使用淺複製。 請參閱<Unity 目錄資料表>的淺複製。
- 更快速的多執行緒統計資料收集: 從 Iceberg 和 Parquet 資料表執行
CONVERT TO DELTA
或複製時,小型叢集上的統計資料收集速度可快出 10 倍。 請參閱<轉換成 Delta Lake>以及<以累加方式將 Parquet 和 Iceberg 資料表複製到 Delta Lake>。 - Delta 檔案上 DeltaSource 中的下推篩選: 為了獲得更好的使用率,差異資料表串流查詢上的分割區篩選現在會先向下推送至 Delta,然後再限制速率。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
已移除 Databricks SQL 物件 (查詢、儀表板和警示) 清單頁面上的 [系統管理員檢視] 索引標籤。 工作區系統管理員使用者可以從其各自的清單頁面檢視所有物件。 請參閱<存取和管理已儲存的查詢>、舊版儀表板,以及<什麼是 Databricks SQL 警示?>。
查詢歷程記錄頁面預設會顯示過去 24 小時內的查詢。 請參閱<查詢歷程記錄>。
[複製到 Lakeview 儀表板] 的功能表選項已新增至 Databricks SQL 儀表板 UI。 您可以使用此工具來建立新的 Lakeview 儀表板,其中包含現有 Databricks SQL 儀表板中的相同查詢和視覺效果。 請參閱<將舊版儀表板複製到 AI/BI 儀表板>。
Lakeview 儀表板中的橫條圖支援堆疊列正規化為 100%。
已修正在已發佈的 Lakeview 儀表板上放大會導致將焦點放在不正確的縮放間隔的問題。
2024 年 1 月 24 日
- Lakeview 儀表板創作區會自動調整小工具位置,以盡可能移除資料列之間的空白垂直空格符。
- 在 Lakeview 儀表板視覺效果中減少標題和描述文字之間的空格符。
2024 年 1 月 18 日
已修正視覺效果的呈現問題,其中在 X 軸上顯示單一日期的橫條圖導致極細的橫條圖。 新的圖表視覺效果會如預期般呈現。
根據預設,Lakeview 儀表板清單頁面會顯示您的儀表板。 您可以使用該頁面上的篩選存取其他工作區使用者所擁有的 Lakeview 儀表板。
2024 年 1 月 11 日
Databricks SQL 查詢和儀表板 API 支援以程式設計方式變更執行身分角色設定。
Lakeview 支援將儀表板匯出和匯入為檔案,以方便跨工作區重現草稿儀表板。 請參閱<匯出、匯入或取代儀表板>
2024 年 1 月 4 日
- 在目錄總管中引進主索引鍵和外部索引鍵實體關係圖。 請參閱<檢視實體關係圖>。
2023 年 12 月 21 日
在比較主要值和目標欄位的
BigInt
值時,Lakeview 計數器視覺效果類型會顯示顏色。已經改善在 Lakeview 中切換資料表資料欄可見性時出現的工具提示。 它們的行為如預期般運作,而且不會保存。
使用者現在可以使用 Databricks 助理在 Lakeview 中建立視覺效果。 請參閱《使用 Databricks 助理建立視覺效果》。
針對新的圖表,熱度圖類型圖表具有 reverseY 設定。
已修正具有大量視覺效果的 Notebooks 轉譯效能問題。
2023 年 12 月 14 日
- 已修正沒有手動重新整理頁面的情況下,Lakeview 儀表板未出現在 Lakeview 清單頁面中的錯誤。
- 使用逸出鍵取消在創作區上放置 Lakeview 小工具時的建立。
- 目錄總管現在會在 UI 中顯示向量搜尋索引,做為 Mosaic AI 向量搜尋公開預覽的一部分。
2023 年 12 月 7 日
使用者介面更新
Lakeview 儀表板可以新增至我的最愛以快速存取。
在繪製 Lakeview 儀表板時,支援複製和貼上鍵盤快捷方式。 此外,刪除鍵會移除選取的小工具。
增強的 Lakeview 小工具標題和描述,以防止在載入期間裁剪文字。
修正了可視化格式問題,其中大整數值錯誤地顯示為浮點數。
修正了 Databricks SQL 儀表板的問題,其中展開的圖表檢視有時會顯示空白圖表。
X 軸和 Y 軸上具有量化欄位的橫條圖會呈現更易讀的資料標籤。
修正了 SQL 編輯器中的問題,讓標題中具有單字
stream
的資料表不再與保留關鍵詞衝突。 這些資料表現在會在結構描述瀏覽器中如預期般出現,而且不會反白顯示錯誤。查詢歷程記錄頁面現在支援資料欄重設大小和資料欄選取專案。
查詢歷程記錄頁面支援兩個新的資料欄:[查詢來源] 和 [查詢來源類型]。
Tableau 和 Power BI 等 BI 選項更容易在合格頁面上的目錄總管中找到。
2023 年 11 月 30 日
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
Lakeview 中的圓形圖現在可以有自訂的色彩指派。
在 Lakeview 中的視覺效果轉換現在會在相容欄位類型之間切換時保留。
已新增 Lakeview 圓形圖角度通道的標題設定。
Lakeview 資料集下拉式清單現在可供搜尋,以方便瀏覽。
Lakeview 支援 10,000 歲以下值的完整數值顯示,並排除縮寫。
已將功能新增至 Lakeview 中的色彩代碼類別目錄日期欄位。
Lakeview 使用者現在可以使用其游標反白顯示圖表圖例,以複製並貼上值。
Lakeview 中的圓形圖現在具有標籤切換選項。
將所有 Lakeview 視覺效果的預設藍色標準化。
轉換中的 Lakeview 資料欄圖示現在一致符合所使用的轉換方法。
Lakeview 編輯面板中的控件現在會自動換行,以提高可讀性。
已發行適用於 Lakeview 視覺效果的增強色彩編輯器。
Lakeview 中的表格字型條件控件現在會包裝起來以改善可讀性。
已改善新圖表中標籤的深色模式相容性。
新的圖表現在會一致地設定標籤在橫條內顯示的優先順序。
修正了某些以滑鼠右鍵按擊功能表動作無法在 SQL 編輯器中運作的錯誤。
2023 年 11 月 16 日
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
由於較大的重設大小觸發程序區域,Lakeview 小工具現在更容易重設大小。
工作區系統管理員現在可以 變更 Lakeview 儀表板的擁有者 。 從 Lakeview 儀表板上的編輯模式:
- 按下 [共用]
- 按下
- 按下 [指派新擁有者]
使用者可以在 Lakeview 中開啟或關閉標籤。
視覺效果:
- 新的圖表標籤現在極力建議盡可能在橫條圖內。
- 新的圖表標籤現在會正確出現在堆疊橫條上,足以顯示整個標籤。
- 橫條圖內的標籤色彩現在更一致。
2023 年 11 月 9 日
2023.50 的變更:
重點:
- 您現在可以在 SQL 和 Python UDF 上使用具名參數調用。
SQL 語言更新: 已新增下列內建函式:
from_xml
:將 XMLSTRING
剖析成STRUCT
。schema_of_xml
:從 XMLSTRING
衍生結構描述。session_user
:傳回登入的使用者。try_reflect
:如果 Java 方法失敗,則傳回NULL
而不是例外狀況。
下列內建函式已增強:
- 函式引動過程。 函式的資料表引數支援資料分割和排序:您現在可以使用
PARTITION BY
和ORDER BY
子句來控制如何將資料表引數傳遞至函式。 mode
:支援強制確定性結果的選擇性參數。to_char
:對於DATE
、TIMESTAMP
和BINARY
的新支援。to_varchar
:對於DATE
、TIMESTAMP
和BINARY
的新支援。array_insert()
是負數索引的 1 起始:針對正和負索引,array_insert
函式是以 1 為基底。 它現在會在索引 -1 的輸入數位列結尾插入新元素。
使用者介面更新
本節所列的功能與上述 SQL 倉儲計算版本無關。
視覺效果:
- 新圖表的工具提示只會顯示高基數圖表的暫留專案。
- 新的圖表會自動對齊零的雙軸圖表。
- 圖表已將旋轉標籤和軸文字角度方向從 -90 度變更為 90 度。
- 圖表現在使用標籤的寬度來決定旋轉。
Lakeview 儀表板:
- 修正: 當只傳回少量資料列時,Lakeview 儀表板中的資料表資料列不會再新增垂直填補。
- 複製新的 Lakeview 儀表板小工具會先嘗試將複製品放在原始的右邊,前提是創作區上有足夠的空間。 如果空間不足,複製內容會放在原始的下方。
- 您現在可以透過 [共用] 對話方塊重新指派 Lakeview 儀表板的擁有者。
SQL 編輯器: 自動完成現在較不積極,並在陳述式結尾自動關閉
2023 年 11 月 2 日
改善:
以下是 Lakeview 儀表板譜系的改善:
- 已新增資料表、檢視表和具體化檢視的相異圖示。
- 已新增許多上游資料來源事件中垂直捲動的支援。
- 已改善當檢視人員缺少上游物件的權限時的錯誤訊息。
- 已釐清範例資料表和 HMS 資料周圍的傳訊。
- 將索引鍵值標記新增至上游資料來源。
修正:
- 已修正新圖表中無法使用布林值重新命名數列之後轉譯的問題。
2023 年 10 月 26 日
Databricks SQL 2023.45 版的變更
重點:
- 更新的預測性 I/O 現已正式發行。 請參閱 什麼是預測性 I/O?
- 刪除向量現已正式發行。 請參閱什麼是刪除向量?
查詢最佳化:
- 如果外部聯結全都是相異彙總函式,則移除外部聯結。 SPARK-42583
- 最佳化篩選述詞的順序。 SPARK-40045
SQL 函式更新:
- 已在
Aggregate
上新增隱含橫向資料欄別名解析的支援。 SPARK-41631 - 使用 Window 在查詢中支援隱含橫向資料欄別名。 SPARK-42217
- 支援 Datasketches
HLLSketch
。 請參閱 <hll_sketch_agg 彙總函式>。 - 已新增
try_aes_decrypt()
函式。 請參閱 <try_aes_decrypt 函式>。 - 支援
aes_encrypt()
和aes_decrypt()
的 CBC 模式。 請參閱 <aes_decrypt 函式>。 - 新增 3-args 函式別名 DATE_ADD 和 DATE_DIFF。
- 已新增對於 aes_encrypt IV 和 AAD 的支援。 SPARK-43290
- 實作點圖函式。 SPARK-44154
- 已新增
to_char
的to_varchar
別名。 請參閱 <to_varchar 函式>。 - 已新增
array_compact
支援。 請參閱 <array_compact 函式>。 - 支援 udf
luhn_check
。 請參閱 <luhn_check 函式>。 - 已新增內建函式具名引數的分析器支援。 SPARK-44059
- 為
TableValuedFunction
支援TABLE
的引數剖析器規則。 SPARK-44200 array_insert
現在失敗,索引為 0。 SPARK-43011- 已為
NULL
新增具有使用者指定之資料欄清單的INSERT
值,且比目標資料表少。 SPARK-42521 DECODE
函式在傳遞 NULL 時傳回錯誤的結果。 SPARK-41668
使用者介面更新
改善:
Lakeview SQL 編輯器現在支持鍵盤快捷方式來執行查詢。
Lakeview 中的篩選現在會列出過去 7、14、28、30、60 和 90 天的快速相對日期範圍選取專案。
資料功能變數名稱中的句點不再導致空白圖表。
舊版結構描述瀏覽器現在可搭配 Unity 目錄使用。
已實作效能改善,只載入 SQL 編輯器中的使用中索引標籤,減少最多 20% 的初始載入時間。
目錄總管中 AI 產生的資料表批注現已正式發行。
修正:
- 時態橫條圖上的橫條現在會置中於日期刻度標記上。
- 具有彙總運算式的資料標籤範本現在會使用適當的數值格式器。
- 在新的圖表上縮放現在適用於使用時態性資料分類的擴展集。
新文章:
- 發行了新的文章,其中顯示所有 Lakeview 視覺效果,包括螢幕快照和附注,顯示如何在每個螢幕快照中重新建立每個視覺效果。 請參閱 <儀表板視覺效果類型>。
2023 年 10 月 19 日
改善:
現在可以使用結構描述瀏覽器中的拖放功能。
Lakeview 儀表板中的 [選取資料表] 強制回應可讓您更輕鬆地從目錄或結構描述中的所有資料表中選取,現在會在您輸入時使用自動完成搜尋預測。
修正:
圖例選取工具提示指示指定 Mac 使用者使用
cmd
,而 Windows 使用者則使用ctrl
。當轉譯的資料超過限制時,在 Lakeview 儀表板中增強截斷訊息的可見度。
截斷資料的圖表會顯示編輯器中所見的一致色彩。
2023 年 10 月 12 日
改善:
包含特殊字元的文字篩選值現在會在 Lakeview 儀表板中正確篩選。
新的圖表支援
@@name
散佈圖上的資料標籤。自訂的百分比格式適用於新圖表中的群組圖表工具提示。
工作區系結延伸模組UI是GA。
修正:
- 已改善新圖表上的標籤轉譯,以防止標籤溢出圖表界限外。
- 增加新圖表上刻度和網格線的對比,以改善可見度。
- 增加軸標籤間距,以改善新圖表的可讀性。
2023 年 10 月 5 日
改善:
已針對 Lakeview 儀表板中的發佈模式動作和日期譜系新增精確的工具提示。
Lakeview 資料表視覺效果中的條件式格式設定和連結範本現在支援隱藏的資料欄。
最佳化寬條時態圖的標籤定位,以增強新圖表的清晰度。
即使移除其他欄位,Lakeview 中的計數器視覺效果仍會保留其轉換,以確保一致性。
將滑鼠停留在圖表中的數列上方,現在會將工具提示中的周圍數列變暗,以改善新圖表的可讀性。
使用百分比值的新圖表現在會顯示具有絕對值的工具提示。
已新增建立磁碟區的自動完成支援。
關閉非使用中索引標籤不再切換索引標籤。
選取的執行會清楚指出醒目提示文字時。
修正:
已改善資料截斷時樞紐分析表中的錯誤訊息文字。
已修正使用 BigInt 資料類型時,樞紐分析表中未顯示色彩的轉譯錯誤。
在具有許多圖例專案的新圖表中下載 PNG 時,請移除溢位圖例專案的色彩符號。
新圖表中的線條即使在最上層的檢視邊界上也會維持一致的粗細。
在 Lakeview 中,如果沒有資料集存在,創作區中的資料集選擇器是空的。
Delta Live 資料表可被 SQL 剖析器正確偵測,而且不會在結構描述瀏覽器中顯示為無效的資料表。
工具提示已新增至側邊欄。
2023 年 9 月 28 日
改善:
已發佈的 Lakeview 儀表板現在有 [重新整理] 按鈕。
已改善無法存取 Lakeview 儀表板的使用者收到的錯誤訊息。
Lakeview 儀表板中的篩選設定現在會在選取清單的頂端列出有效欄位。
從 Lakeview 儀表板下載圖表做為 PNG 現在會保留標題和描述。
目錄總管中的 Delta 資料表歷程記錄改善包括新增日期範圍、使用者和作業類型的篩選、可排序的資料欄,以及與關聯作業和 Notebooks 的內置連結。
在圖例、工具提示和資料表視覺效果中新增了深色模式支援。
修正:
- 重新整理 Lakeview 儀表板時,不再清除篩選選取項目。
2023 年 9 月 21 日
改善:
- 已改善樞紐資料表呈現效能。
- UI 中譜系表格式檢視的新 DuBois 模式。
2023 年 9 月 14 日
改進:
- 在新的圖表視覺效果中下載 PNG 時,現在會保留檔案名稱。 請參閱<Databricks 中的新圖表視覺效果>。
2023 年 9 月 7 日
Databricks SQL 2023.40 版現已可用
推出排程
- 2023.40 預覽版推出時間:2023 年 9 月 5 日和 2023 年 9 月 11 日之間
- 2023.40 目前版推出時間:2023 年 9 月 18 日和 2023 年 9 月 25 日之間
2023.40 的變更:
- 現在已經提供標籤供 Unity 目錄使用。
- 如果在查詢計劃和引用之間修改了檔案,Databricks Runtime 會傳回錯誤。
- Azure Databricks ODBC/JDBC 驅動程序支援。
- 啟用時間序列欄標籤。
- 新的點陣圖 SQL 函式。
- 改進的加密函式。
- Unity 目錄可支援
REFRESH FOREIGN.
- 現在已支援
INSERT BY NAME
。 - 使用 Delta Sharing 共用具體化檢視。
使用者介面更新
改善:
現在已有新的圖表可供使用,其呈現效能較快、色彩美觀,並且已經改善互動性。 請參閱<Databricks 中的新圖表視覺效果>。
在查詢設定檔的圖表化檢視中,您現在可以在包含查詢計劃中聯結的任何節點上檢視聯結類型。
資料總管已重新命名為目錄總管,以識別您可以使用它來處理 Unity 目錄中所有安全性實體物件的事實,而不只是資料物件。 請參閱什麼是目錄總管?。
Databricks SQL 陳述式執行 API 現已正式發行 Databricks SQL 2023.35 版和更新版本。 API 可讓您提交 SQL 陳述式以便在 Databricks SQL 倉儲上執行、檢查狀態和擷取結果,或取消執行中的 SQL 陳述式執行。 請參閱《陳述式執行 API》。
2021 年 8 月 13 日
新功能:
- Unity 目錄的標記處於公開預覽狀態。 您可以使用標籤簡化資料資產的搜尋和探索。 請參閱<將標籤套用至 Unity 目錄安全性實體物件>。
2023 年 8 月 24 日
改進:
- 在您按下空格鍵之後,自動完成會停止提供建議。
- 結構描述瀏覽器不會再將
live
Delta Live 資料表視為損壞的資料表。
2023 年 8 月 16 日
改進:
- 當您切換索引標籤時,SQL 編輯器中的 [目錄] 下拉式清單現在會關閉。 先前,當您切換索引標籤時,下拉式清單會保持開啟狀態。
2023 年 8 月 10 日
改進:
- 自動完成現在可支援設定 Unity 目錄標籤的新語法。 如需有關命令的資訊,請參閱 SQL 語言參考。
2023 年 8 月 3 日
改善:
- 基礎 Monaco 編輯器現在使用 37.1 版。
SHOW ARCHIVED FILES FOR
Delta 指令支援自動完成
2023 年 7 月 27 日
改善:
- SQL 編輯器現在與 Windows 新行字元相容,可確保查詢格式在所有情況下都能如預期般運作。
- 您可以透過筆記本結果開啟查詢設定檔瀏覽。 如需進行查詢,請使用 SQL 倉儲執行查詢。
2023 年 7 月 20 日
Databricks SQL 2023.35 版現已可用
推出排程
- 2023.35 的預覽版推出時間:2023 年 7 月 18 日和 2023 年 7 月 24 日之間
- 2023.35 的目前版推出時間:2023 年 7 月 31 日至 2023 年 8 月 8 日之間
2023.35 的變更:
- 利用 Unity 目錄中的淺複製增強
VACUUM
的可靠性。 - 支援 SQL 中的 Python UDF。
- Delta Lake UniForm for Iceberg 處於公開預覽狀態。
- Delta Lake 液態叢集位於公開預覽
- Delta Lake 的封存支援。
- IDENTIFIER 子句支援。
- Python 和 Pandas 使用者定義函式 (UDF) 的 Unity 目錄支援。
改進:
- 目錄總管中的資料表熱門程度適用於所有 Unity 目錄使用者。
2023 年 7 月 13 日
改進:
- Unity 目錄使用者現在可以在目錄總管中檢視其他資料表深入解析,例如經常聯結的資料表、指定資料表的常用使用者,以及常用筆記本和儀表板。
2023 年 6 月 22 日
公開預覽:
- Databricks SQL 現在支援裝載於服務端點的模型上的大型語言模型 (LLM)。 呼叫
ai_query()
以存取您的 LLM。 此函式僅適用於 Databricks SQL Pro 和無伺服器公開預覽版。 若要參與公開預覽,請提交 AI Functions 公開預覽註冊表單。
2023 年 6 月 15 日
新功能:
- 作業中的 SQL 工作現已正式推出。 您可以從 [作業] 頁面協調查詢、儀表板和警示。 請參閱 <作業的 SQL 工作>。
- 新的架構瀏覽器現在處於公開預覽狀態,其中包含更新的UX、[適用於您] 索引標籤,以及改善的篩選條件。 Databricks SQL、目錄總管和筆記本中提供架構瀏覽器。 請參閱<瀏覽資料>。
2023 年 6 月 8 日
DBSQL 2023.30 版可用
2023.30 的變更
- 新的 SQL 內建函式,例如
array_prepend(array, elem)
、try_aes_decrypt(expr, key [, mode [, padding]])
與sql_keywords()
。 - 您現在可以使用淺複製,從現有的 Unity 目錄受控資料表建立新的 Unity 目錄受控資料表。 請參閱<Unity 目錄資料表>的淺複製。
- 您現在可以將
CLONE
和CONVERT TO DELTA
與 Iceberg 資料表搭配使用,該資料表有在類型int
、long
和string
的截斷資料欄定義的分割區。 不支援類型的decimal
截斷資料欄。 START VERSION
現已被ALTER SHARE
取代。
使用者介面更新
修正:
- 計數器視覺效果現在支援使用 Big Integers 時的格式設定。
2023 年 6 月 1 日
改善:
使用箭頭格式時,二進位資料現在會轉譯為十六進位字串。
在 SQL 陳述式 API 中,
EXTERNAL_LINKS
配置現在支援 CSV 格式。 這可讓使用者端以 CSV 格式擷取最多 100 GiB 的資料,且預先簽署的 URL,而INLINE
JSON 的限制為 16 MiB。Azure Databricks SQL Pro 適用於所有中國區域。 SQL Pro 現在是 UI 中的預設倉儲。 API 預設值仍然是傳統。
2023 年 5 月 29 日
新功能:
- 您現在可以使用新增資料 UI,從定義為 Unity 目錄外部位置的雲端物件儲存路徑載入資料。 如需詳細資訊,請參閱<使用 Unity 目錄外部位置>載入資料。
2023 年 5 月 25 日
改善:
- 您現在可以切換自動完成結果面板。
- 停用 Enter 鍵,使其不再接受自動完成建議。 在 [DBSQL 使用者設定] 底下,按下 [編輯器設定],然後按下 [新增編輯器設定]。 關閉 Enter 鍵接受自動完成建議。
修正:
- 已排序的資料表標頭現在具有色彩。
- 現在會正確呈現圖表折線。
2023 年 5 月 18 日
改進:
- 在 SQL 陳述式 API 中,
EXTERNAL_LINKS
處置現在支援JSON_ARRAY
格式。 您可以使用預先簽署的 URL,以 JSON 格式擷取最多 100 GiB 的資料。 JSON 的INLINE
限制為 16 MiB。
2023 年 5 月 11 日
新功能:
- 結構描述瀏覽器現在已在目錄總管中正式推出。
改善:
- 暫留資料表詳細資料面板的顯示較不敏感。
- [escape] 鍵現在會關閉自動完成面板。
- 檢視定義現在在 [目錄總管詳細資料] 索引標籤中具有語法醒目提示。
修正:
- 樞紐分析表現在會在 Windows 裝置上正確轉譯。
- 完成建議現在會正確遵循第一個關鍵字的情況。
2023 年 5 月 4 日
Databricks SQL 2023.26版 現已可用
推出排程
- 2023.26 的預覽推出:2023 年 4 月 19 日至 2023 年 4 月 25 日
- 2023.26年目前的推出:2023 年 5 月 3 日和 2023 年 5 月 10 日之間
2023.26 的變更
- 如果檔案在查詢規劃和執行之間修改,Photon 會傳回錯誤。
- 新功能和預測性 I/O 功能的擴充支援。 請參閱Databricks Runtime 13.0 (EoS)。
- 使用 Azure Databricks 連接器連線到另一個 Azure Databricks 工作區。
- 差異資料表的
CREATE TABLE LIKE
功能。 - 新的中繼資料欄欄位表示檔案區塊的開始和長度。
- 新的 H3 地理空間函式。 請參閱H3 地理空間函式。
- 新的 Spark SQL 內建函式 請參閱Databricks Runtime 13.0 (EoS)。
使用者介面更新
改善:
- 系統管理員可以使用使用者介面或 API 來變更倉儲擁有者。 請參閱管理 SQL 倉儲。
- 目錄總管現在會在 Unity 目錄中資產的使用者清單中顯示帳戶服務主體。 例如,在目錄總管中編輯權限或變更擁有者時,可以看到帳戶服務主體。
- 自訂圖表標籤支援參考資料集內任何資料欄的能力。
- 即使在使用沒有目錄或架構資訊的查詢時,儀表板篩選現在也會載入資料欄名稱。
2023 年 4 月 27 日
改善:
- SQL 編輯器現在依賴 Monaco 編輯器,以獲得更可靠的編輯體驗。
- SQL 歷程記錄清單頁面 (查詢) 現在包含 Dubois 設計系統。
2023 年 4 月 20 日
改善:
- 引進新的樞紐分析表,可讓您彙總超過 64k 個結果。
- Databricks SQL 資料表和視覺效果現在支援 BigInt、38 位十進位和非 UTF-8 字元。 對於數字,預設設定現在是使用者定義的數字有效位數。
- 自動完成現在建議 Unity 目錄資料表的過去聯結,由 Databricks Runtime 12.0 和更新版本中的 Unity 目錄譜系資料提供。
新功能:
- 傳回由選取的大型語言模型 (LLM) 所產生的文字,並以 ai_generate_text 指定提示。 此函式僅適用於 Databricks SQL Pro 和無伺服器公開預覽。 若要參與公開預覽,請填入並提交 AI Functions 公開預覽註冊表單。
2023 年 4 月 13 日
新功能:
- 此
TIMESTAMP_NTZ
類型代表由欄位年、月、日、小時、分鐘和秒組成的值。 不論時區為何,都會執行所有作業。 請參閱TIMESTAMP_NTZ 類型。
改善:
- 使用者現在可以使用自訂警示訊息中的
QUERY_RESULT_TABLE
標記,在警示內傳送格式化的結果。 - 使用者現在可以在目錄總管中檢視 Unity 目錄資料表的檔案資料大小。
2023 年 4 月 6 日
Databricks SQL 2023.20版 現已可用
推出排程
- 2023.20 的預覽推出時間:2023 年 3 月 15 日和 2023 年 3 月 23 日之間
- 2023.20 目前版推出時間:2023 年 3 月 27 日和 2023 年 4 月 3 日之間
2023.20 的變更
- Delta Lake 架構演進支援在合併語句中指定源資料欄。
- 使用 array_compact 從陣列中移除所有 NULL 元素。
- 若要將元素附加至陣列,請使用 array_append。
- 若要匿名敏感性字串值,請使用 mask函式。
- 常見的錯誤狀況現在會傳回 SQLSTATE。
- 在查詢的一般
FROM
子句中叫用資料表值產生器函式。 - 使用
from_protobuf
和to_protobuf
函式在二進位和結構類型之間交換資料。 請參閱讀取和寫入通訊協定緩衝區。 - 針對與
update
、delete
和merge
命令相關的空白交易,改善 Delta 提交行為的一致性。 - 行為變更
- 橫向資料欄別名功能會在名稱解析期間引入行為變更。 請參閱行為變更。
使用者介面更新
改善:
- 目錄總管現在支援 Hive 中繼存放區刪除。
- 視覺效果編輯器初始狀態的訊息已從 [遺漏必要資料欄] 變更為 [無資料]。
2023 年 4 月 3 日
新功能:
- 從檔案上傳建立或修改資料表頁面現在支援 JSON 檔案上傳。 如需詳細資訊,請參閱從檔案上傳建立或修改資料表。
2023 年 3 月 30 日
改善:
- 在 [倉儲監視] 頁面上,您現在可以檢視所選時間範圍的查詢歷程記錄,以及調整圖表。 您也可以檢視目前正在執行的查詢和已排入佇列的查詢、作用中的 SQL 工作階段、倉儲狀態,以及目前的叢集計數。 請參閱監視 SQL 倉儲。
- 地圖叢集現在預設會在標記地圖中關閉。
- 已新增視覺效果截斷和轉譯限制的工具提示。
修正:
- 當座標軸值停用排序時,圖表現在會遵守原始順序,而且圖表具有依資料欄分組。
2023 年 3 月 23 日
改善:
- 視覺效果現在支援按週的時間量化。
Total
現在會計算筆記本樞紐分析表中超過100 X 100單元格的所有資料,結果最多64k個。- 使用者現在可以格式化新筆記本樞紐分析表中的資料格值。
- 檔案、查詢和功能存放區歷程可供使用。
2023 年 3 月 16 日
改進:
- 支援
GROUP BY ALL
語法。
2023 年 3 月 9 日
新功能:
- Databricks SQL 陳述式執行 API 現在可在公開預覽中取得。 陳述式執行提供在 Databricks SQL 倉儲上執行 SQL 陳述式的端點。 它也可以檢查狀態、擷取結果,以及取消執行中的 SQL 陳述式。
改進:
- SQL 管理控制台已與一般系統管理員設定結合,為系統管理員使用者建立統一體驗。 所有 SQL 系統管理員設定現在都會從管理主控台存取。
- 警示目的地現在稱為通知目的地。
修正:
- 資料表不再顯示兩個滾動條。
- 儀表板上不再覆寫空白小工具標題。
2023 年 3 月 2 日
修正:
- 您現在可以在資料表中使用相對 URL 來存取儀表板。
2023 年 2 月 23 日
改進:
TINYINT
現在支援筆記本中的結果資料表。
修正:
- 已修正在建立儀表板篩選強制回應上捲動導致錯誤的錯誤。
2023 年 2 月 16 日
改善:
- 圖表上的資料標籤現在會顯示更多字元,以避免截斷描述。
- 自動完成現在可識別
range()
和 Python UDFcreate
函式。 - 自動完成現在可避免在小數點和程式碼註解內初始化片段。
修正:
- 使用者現在可以放大地圖。
- 在筆記本中,色彩現在已正確指派給圖表。
2023 年 2 月 2 日
改善:
- 在編輯器支援
DESCRIBE DETAILS
。 - 改善結構描述瀏覽器載入速度。
- 您現在可以在
SELECT *
的側邊面板上檢視可能的資料欄清單。
2023 年 1 月 26 日
改進:
- 查詢的錯誤訊息現在包含描述錯誤的相關文件主題連結。
2023 年 1 月 19 日
改善:
- 您現在可以找到醒目提示重要增強功能的 [新功能] 面板。 您可以按下禮物圖示來開啟和關閉此面板。
- 系統管理員現在可以變更 SQL 倉儲的擁有權。
- 您現在可以在儀表板中篩選多個視覺效果,方法是按下 [新增] > [篩選],然後選取要篩選的查詢和資料欄。
2023 年 1 月 12 日
改善:
- 儀表板上的視覺效果小工具標題現在會格式化為 [視覺效果名稱 - 查詢名稱] 預設。
- 已將 H3 地理空間函式新增至內嵌面板參考。
- 新增 SQL 語法內嵌參考,例如
CREATE TABLE
與OVER
。
修正:
- 當 X 軸尺規設定為自動時,現在可以使用排序和反向切換。
- 熱度圖和樞紐分析表現在對某些邊緣案例有回應。
- 類別 Y 軸刻度標記現在預設會排序。
- 執行瀏覽器重新整理之後,查詢草稿不會再遺失。
2022 年 12 月 8 日
- Azure Databricks SQL 警示現在支援查詢結果資料欄彙總的警示,例如
SUM
、COUNT
和AVG
。 - 在儀表板上建立新小工具時,預設視覺效果標題現在是 'VisualizationName - QueryName'。
2022 年 11 月 17 日
警示:
- Chatworks、Mattermost 和 Google Hangouts Chat 不再是通知目的地。
改進:
- y 軸現在會在檢查百分比值時,將數字顯示為百分比。
- 停用上傳資料 UI 的工作區系統管理員設定現在會套用至新的上傳資料 UI。 此設定適用於資料科學和工程、Databricks Mosaic AI 和 Databricks SQL 角色。
修正:
- 已修正 Databricks SQL 警示中與 Null 值比較不正確的問題。
- 已修正樞紐分析表上的滾動條消失的問題。
- 已修正結構描述瀏覽器無法使用溢位索引標籤重設大小的問題。
2022 年 11 月 10 日
改進:
- 您現在可以建立可同時跨多個查詢運作的儀表板篩選。 在 [編輯儀表板模式] 中,依序選擇 [新增]、[篩選]、[新增儀表板篩選]。
- 自動完成現在支援
CREATE MATERIALIZED VIEW
。
修正:
- 已修正捲動到一組儀表板分頁結果結尾會傳送錯誤的問題。
- 已修正從堆疊橫條圖切換到折線圖保留堆疊屬性的問題。
- 已修正重複的擷取呼叫。
2022 年 11 月 3 日
改進:
- 在 Databricks SQL 中要求存取權時,預設權限現在是「可以執行」。
修正:
- 已修正使用查詢和儀表板 API 排序
created_at
未傳回正確排序順序的問題。 - 已修正包含 HTML 格式設定 URL 的資料欄過寬的問題。
- 已修正
WHERE
關鍵字未反白顯示的問題。
2022 年 10 月 27 日
改善:
將查詢結果下載至 Excel 的資料列限制已從 64,000 個資料列增加到 100,000 個資料列。 CSV 和 TSV 下載限制保持不變 (大約 1 GB 的資料)。
自動完成現在支援
LIST
語法、URL 和認證。合併和現代化 Fix-me 建議面板。
Databricks SQL Pro 引進了新的倉儲類型 Databricks SQL。 此倉儲類型可讓 Databricks SQL 倉儲使用作業整合、查詢同盟、地理空間功能和預測 IO。
修正:
- 已修正編輯器中警告橫幅重疊完整高度視覺效果的問題。
- 已修正當資料表的資料欄移動時,資料表資料欄寬度不會保留的問題。
- 已修正從 SQL 編輯器新增視覺效果時,彈出視窗通知中儀表板的連結已中斷的問題。
2022 年 10 月 20 日
改善:
- 您現在可以在頁尾中找到查詢進度列,以及編輯 kebab 功能表中的視覺效果動作。
- 自動完成現在支援差異時間移動,並在定義外鍵時提供資料欄自動完成。
修正:
- 已修正將多個視覺效果快速連續新增至儀表板會導致儀表板上未顯示視覺效果的問題。
2022 年 10 月 13 日
改善:
- 您現在可以移除回報的錯誤訊息。
- 編輯器中現在支援
COMMENT ON
指令。 - 您現在可以使用 Cmd+P 或 Ctr+P (適用於 PC) 做為熱門搜尋的捷徑。 針對 [新增參數] 使用 Cmd+I 或 Ctr+I (適用於 PC)。
2022 年 10 月 11 日
改善:
- 新增資料 UI 可讓您存取一般資料源組態和檔案上傳UI。 請參閱將檔案上傳至 Azure Databricks。
- 您可以使用 UI 將小型檔案上傳至 Delta Lake。 請參閱使用檔案上傳建立或修改資料表。
2022 年 10 月 6 日
改善:
EXTERNAL
現在是保留的資料表屬性。 如果在屬性中指定EXTERNAL
命令,則CREATE TABLE ... TBLPROPERTIES
和ALTER TABLE ... SET TBLPROPERTIES
命令失敗。strfmt
中的format_string(strfmt, obj, ...)
不再printf(strfmt, obj, ...)
支援使用0$
做為第一個引數。 使用引數索引來指出引數清單中的引數位置時,應該由1$
參考第一個引數。- 圓形圖區段現在有細框線可劃出不同的區段。
- 您現在可以使用 Cmd+I (適用於 Mac) 或 Ctr+I (適用於 PC) 做為 [新增參數] 捷徑。 使用 Cmd+P 或 Ctr+P (適用於 PC) 做為 [全域搜尋] 的捷徑。
- 意見反應按鈕適用於良好或不正確的查詢錯誤訊息。
- [修正] 建議現在可做為 [快速修正]。
修正:
lpad
和rpad
函式現在可正確地使用BINARY
字串輸入。 用於lpad
字串輸入的BINARY
和rpad
輸出現在是BINARY
字串。- 已修正手動警示重新整理無法運作的問題。
- 回復自動計數器重設大小變更,以修正格式化問題。
2022 年 9 月 29 日
改善:
- 您現在可以從這些資產的擁有者要求存取 Databricks SQL 查詢、警示和儀表板。
- 您現在可以在 [查詢記錄] 頁面上依查詢持續時間和陳述式類型進行篩選。
- 若要使用查詢持續時間篩選,請輸入時間量並選擇時間單位。 歷程記錄結果會傳回執行時間超過指定時間的查詢。
- 若要使用陳述式類型篩選,請從下拉式清單中選擇陳述式類型。 歷程記錄結果會傳回包含該陳述式的查詢。
修正:
- 已修正並非所有支援的 HTML 標籤都在自訂警示範本中運作的問題。 所有標籤都可供記載使用。
- 已修正視覺效果通知快顯通知的問題。 例如,按兩下以縮小之前未顯示的視覺效果。
- 已修正圖表上交換座標軸未反映在圖表名稱中的問題。
2022 年 9 月 22 日
改善:
- 當儀表板上顯示多個計數器小工具時,相同大小的計數器小工具會有相同的字型重設大小。
- 更新的組合圖表,以便在使用雙軸時,只能在相同的座標軸上使用相同的圖表類型 (例如折線圖、橫條圖)。 數列別名也會套用至座標軸。
- 已新增代理金鑰和
LIST
操作的自動完成支援。
修正:
- 已修正文字參數不接受
Null
為有效值的問題。
2022 年 9 月 15 日
修正:
- 已修正從 SQL 倉儲清單頁面檢視查詢歷史記錄無法運作的問題。
2022 年 9 月 8 日
改進:
- 在 DSE/SQL 首頁中介紹新的「開放原始碼整合」卡片,其中顯示開放原始碼整合選項,例如 Delta Live Tables 和 dbt 核心。
修正:
- 已修正 [視覺效果] 索引卷標封鎖參數下拉功能表的問題。
2022 年 9 月 1 日
改善:
- 引進新的簡化 UI 以新增參數和篩選。 選擇 並選擇新增篩選或參數。
- SQL 權杖的括號,例如 'OVER ()' 現在會自動完成。
修正:
- 已修正在全螢幕中檢視儀表板時忽略調色盤的問題。
- 修正了快速輸入,然後使用執行捷徑執行先前的查詢文字,而不是新輸入的查詢文字的問題。
- 修正使用鍵盤命令時,ctrl+enter 執行查詢會提交重複查詢的問題。
2022 年 8 月 25 日
修正:
- 已修正查詢參數變更時儀表板篩選未更新的問題。
2022 年 8 月 18 日
針對 Databricks SQL,Unity 目錄 (公開預覽_ 可在預覽通道中使用。 如需詳細資訊,請參閱什麼是 Unity 目錄?。
文件:警示 API 文件已發行。
視覺效果:使用者現在可以設定日期篩選的預設值。 每當查詢或儀表板上重新整理篩選條件時,就會套用預設值。
修正:
- 已修正當儀表板仍在重載時,套用變更無法運作的問題。
- 已修正當查詢傳回沒有結果時,資料欄太窄的問題。
2022 年 8 月 11 日
改善:
- 當使用者的重新整理失敗時,可以接收電子郵件。 若要啟用這類通知,請瀏覽至 管理控制台的 [SQL 設定] 索引標籤。 在 [失敗電子郵件] 下方,選擇您想要接收失敗通知的物件類型 (查詢、儀表板或警示)。 失敗報告會每小時傳送。
- 視覺效果
- 介紹視覺效果和儀表板的新式現代調色盤。 若要將儀表板變更為新的調色盤,請移至您的儀表板,按兩下 [編輯] - >[色彩] - >[匯入],然後選取 [Databricks 調色盤]。 SQL 系統管理員也可以移至 [設定] - >[QL 管理控制台] - >[工作區色彩] - >[匯入] 並選取新的調色盤,將新的調色盤設定為工作區的預設選項。
修正:
- 已修正如果查詢已執行,先前選取 [套用變更] 以套用篩選無法運作的問題。
2022 年 8 月 4 日
改善:
- 在複製儀表板時,現在還有一個選項可以複製查詢。
- 索引標籤內容會在瀏覽器索引標籤之間同步處理。 查詢的狀態現在會跨所有瀏覽器索引標籤同步。 這表示如果您在瀏覽器索引標籤 1 中處理 query1,然後切換至瀏覽器索引標籤 2,您會看到 query1 處於您在原始瀏覽器索引標籤中離開時的狀態。
修正:
- 圓形圖中空字串的標籤現在會反映字串是空的,而不是值的索引。
2022 年 7 月 28 日
- 警示
- 自訂警示電子郵件範本已更新,以禁止某些可能造成安全性風險的 HTML 標記。 會自動清理不允許的 HTML 標籤和屬性。 例如,
- 使用者現在可以將其他使用者訂閱警示,而無須建立需要系統管理員權限的通知目的地。
- 下載:使用者現在可以從 CSV 和 TSV 格式的 Databricks SQL 下載最多 1 GB 的結果資料,最多可從先前的 64,000 個資料列下載。
- 視覺效果
- 您現在可以直接在儀表板上編輯視覺效果。 在編輯模式中,按兩下kebab功能表,然後選取 [編輯視覺效果] 以開始編輯視覺效果。
- 下載與利用彙總之視覺效果相關聯的結果時,也會彙總下載的結果。 下載的選項是從底部 kebab 移至與索引標籤相關聯的 Kebab。下載的結果來自最近建立視覺效果的查詢執行。
- SQL 編輯器:當瀏覽器內資料表所顯示的資料限製為 64,000 個資料列時,結果資料表現在會顯示訊息。 TSV 和 CSV 下載仍將是大約 1 GB 的資料。
- 查詢篩選:
- 查詢篩選條件已更新為在使用者端或伺服器端動態運作,以將效能最佳化。 先前的查詢篩選 (現在是舊版) 僅運作用戶端。 如有需要,使用者仍然可以使用舊版篩選搭配
::
語法。 - 更新的篩選條件更簡單:使用者按兩下 [+新增篩選] 按鈕,然後從下拉式清單中選取資料欄。 之前,使用者必須直接修改查詢文字。
- 系統會醒目提示相關值,讓您更輕鬆地查看篩選內哪些選取專案會傳回指定其他篩選之選取範圍的結果。
- 查詢篩選條件已更新為在使用者端或伺服器端動態運作,以將效能最佳化。 先前的查詢篩選 (現在是舊版) 僅運作用戶端。 如有需要,使用者仍然可以使用舊版篩選搭配
- 查詢歷史記錄:查詢歷史記錄中的查詢詳細資料現在會顯示查詢來源,這是執行查詢的來源。
2022 年 7 月 21 日
- 共用上的通知:每當儀表板、查詢或警示與其共用時,使用者現在都會透過電子郵件收到通知。
- 透過新的內嵌編輯器工具組增強的 SQL 編輯器體驗
- 即時語法錯誤醒目提示 (例如,錯誤的關鍵詞、資料表不存在,以及修正錯誤的建議)
- 在內容說明中:暫留時 (例如完整資料表名稱、詳細函式面板) 和內嵌執行錯誤訊息 (例如,醒目提示執行後發生錯誤的資料列)
- 建議的智慧排名 (例如,參數自動完成、排名公式、較少嘈雜比對)
2022 年 7 月 14 日
- 除了 CSV 檔案之外,
Create Table
您現在可以使用 UI 上傳 TSV 檔案。 - 每當儀表板、查詢或警示與其共用時,Databricks SQL 現在會提供透過電子郵件通知使用者的選項。
- 視覺效果資料表現在選擇性地包含結果旁顯示的資料列編號。
- 當您選取一個地理區域做為 Chloropleth 視覺效果時,您現在會收到已接受值的內嵌提示。
2022 年 6 月 23 日
- SQL 端點名稱變更:Databricks 會將名稱從 SQL 端點變更為 SQL 倉儲,因為它不只是執行 SQL 命令的 API 進入點。 SQL 倉儲是所有資料倉儲需求的計算資源,這是 Databricks 平台不可或缺的一部分。 計算資源是基礎結構資源,可提供雲端中的處理功能。
- 針對 Choropleth 視覺效果,視覺效果編輯器中的 [索引鍵] 資料欄和 [目標] 欄位選取專案已重新命名為 [地理資料欄] 和 [地理類型]。 這種可理解性的重新命名不會對新的或現有的 Choroples 造成任何行為變更。
- [限制 1000 查詢] 選項已從 SQL 查詢編輯器中的核取方塊移至 [執行] 按鈕中的核取方塊。
- 查詢記錄資料表中的快取查詢現在會標示為快取標記。
- 手動重新整理儀表板會使用儀表板的倉儲 (如果有的話),而不是每個個別查詢的倉儲。
- 不論執行身分查看器/擁有者設定為何,重新整理警示一律會使用警示的倉儲。
2022 年 6 月 9 日
- 當您將滑鼠停留在端點選取器中時,完整端點名稱會顯示為工具提示。
- 當您在 SQL 編輯器結構描述瀏覽器中篩選時,搜尋字詞現在會在搜尋結果中反白顯示。
- SQL 編輯器中的 [全部關閉] 對話框現在會顯示未儲存的查詢清單。
- 若要在 SQL 編輯器中重新開啟最後一個關閉的索引標籤,請使用這個新的鍵盤捷徑:
<Cmd> + <Shift> + <Option> + T
- 您現在可以將資料標籤新增至組合圖表。
- 視覺效果彙總作業清單現在包含變異數和標準差。
2022 年 5 月 26 日
撰寫改善:
- 您現在可以在撰寫視覺效果時略過彙總。 當您的查詢已經包含彙總時,這特別有用。 例如,如果您的查詢是
SELECT AVG(price_per_sqft), isStudio, location GROUP BY location, isStudio
,則圖表編輯器先前需要明確指定另一層彙總。 - 當您撰寫儀表板時,您現在可以:
- 重複的文字框小工具
- 展開編輯文字框面板的大小
- 當您撰寫視覺效果時,錯誤資料欄的預設彙總是標準差。
修正:
- 只有在儀表板處於編輯模式時,才能使用視覺效果的編輯動作。 編輯動作已不再做為檢視模式動作使用。
- 在建立新的查詢時,它會在焦點索引標籤右邊的索引標籤中開啟,而不是在清單結尾開啟。
- 開啟的查詢強制回應會顯示已開啟的查詢,並提供將焦點切換至該查詢索引標籤的選項。
- Sankey 和 Sunburst 圖表不再將 0 視為 Null。
2022 年 5 月 19 日
- 已修正問題:當您在特定視覺效果索引標籤上開啟 SQL 編輯器的焦點,並共用與其他使用者的連結時,當使用者按兩下共用連結時,SQL 編輯器中會有相同的焦點。
- 改善:
- Microsoft Teams 現在是支援的通知目的地。
- [日期範圍]、[日期和時間範圍] 和 [日期和時間範圍] (含秒) 參數現在支援將星期幾的開始日期指定為預設值的選項。
2022 年 5 月 12 日
- 視覺效果現在直接支援 UI 中的時間量化。 您現在可以藉由變更下拉式值,而不是在查詢文字本身中新增和修改
date_trunc()
函式,輕鬆地在每年、每月、每日或每小時的間隔之間切換。 - 儀表板現在預設具有色彩一致性。 如果您在多個圖表上具有相同的數列,則數列在所有圖表上都會以相同的色彩顯示,而不需要任何手動設定。
2022 年 5 月 3 日
- 與使用者或群組共用儀表板時,我們現在也能夠共用視覺效果和參數所使用的所有上游查詢。
- 當您沒有共用一或多個上游查詢的權限時,您會收到警告訊息,指出並非所有查詢都可以共用。
- 共用儀表板時授與的權限不會覆寫、否定或擴充上游查詢的現有權限。 例如,如果使用者或群組在共用儀表板上具有 CAN 執行身分擁有者權限,但對上游查詢只具有「以檢視人員執行」權限,該上游查詢的有效權限將是「以檢視人員執行」。
2022 年 4 月 27 日
- 您的儀表板版面配置現在會在視需要匯出至 PDF 時保留,並產生排程的訂用帳戶電子郵件。
2022 年 3 月 17 日
- 圖表包含新合併的視覺效果選項。 這可讓您建立包含橫條和線條的圖表。
2022 年 3 月 10 日
- Unity 目錄 (預覽版) 可讓您管理控管和存取帳戶層級的資料。 您可以集中管理中繼存放區和資料權限,並將中繼存放區指派給帳戶中的多個工作區。 您可以使用 Databricks SQL 目錄總管或 SQL 編輯器來管理 Unity 目錄資料和物件並與其互動,而且您可以在儀表板和視覺效果中使用 Unity 目錄資料。 請參閱什麼是 Unity Catalog?。
注意
Unity 目錄需要 SQL 端點使用處於預覽通道的 2022.11 版。
- 差異共用 (預覽) 可讓您與組織外部的收件者共用唯讀資料。 Databricks SQL 支援查詢差異共用資料,並在視覺效果和儀表板中使用。
- 每次手動或排程重新整理儀表板時,儀表板和上游的所有查詢,包括參數所使用的查詢都會重新整理。 重新整理個別視覺效果時,會重新整理所有上游查詢,包括參數所使用的查詢。
2022 年 3 月 2 日
- 世代視覺效果已更新,讓世代從最小值和最大值插入,而不是 0 和 100。 現在更容易區分世代在可用資料的實際範圍內。 先前,如果所有數字都靠近在一起,則會使用相同的色彩。 現在,接近在一起的數字更有可能使用不同的色彩,因為世代會除以最大值到最小範圍,以形成每個數列。
- 查看儀表板訂用帳戶排程為作用中或已暫停會比較容易。 當您按下 [訂閱] 時,如果儀表板訂用帳戶排程已暫停,就會顯示 [此排程已暫停的訊息]。 當儀表板訂閱排程暫停時,您可以從儀表板訂閱或取消訂閱,但不會傳送排程的快照集,也不會更新儀表板的視覺效果。
- 當您檢視查詢歷史記錄時,您現在可以依持續時間進行清單排序。 根據預設,查詢會依開始時間排序。
2022 年 2 月 24 日
- 在目錄總管中,您現在可以檢視資料表、檢視、架構或目錄的使用者或群組擁有的權限。 按下物件,然後按下 [權限],然後使用新的篩選方塊。
2022 年 2 月 17 日
- 視覺效果只是變得更聰明! 當查詢產生一或兩個資料欄時,系統會自動選取建議的視覺效果類型。
- 您現在可以建立色階分佈圖,將資料集內每個值發生的頻率視覺化,以及了瞭解資料集是否有以少量範圍或更分散的值叢集。
- 在查詢歷史記錄和查詢設定檔中,您現在可以展開至查詢字串的完整寬度,以及失敗查詢的錯誤訊息。 這可讓您更輕鬆地分析查詢計劃,並針對失敗的查詢進行疑難解答。
- 在橫條圖、線條、區域、圓形圖和熱度圖視覺效果中,您現在可以直接在視覺效果組態 UI 中執行彙總,而不需要修改查詢本身。 利用這些新功能時,彙總會透過整個資料集執行,而不是限制為前 64,000 個資料列。 在此版本之前編輯建立的視覺效果時,您會看到一則訊息,指出
This visualization uses an old configuration. New visualizations support aggregating data directly within the editor.
如果您想要利用新功能,您必須重新建立視覺效果。 請參閱在視覺效果中啟用彙總。
2022 年 2 月 10 日
您現在可以設定儀表板的自訂調色盤。 出現在該儀表板中的所有視覺效果都會使用指定的調色盤。 設定自訂調色盤不會影響視覺效果在其他儀表板或 SQL 編輯器中的顯示方式。
無論是由 Databricks 提供,還是由工作區管理員建立,您都可以指定調色盤的十六進位值,或從另一個調色盤匯入色彩。
將調色盤套用至儀表板時,該儀表板中顯示的所有視覺效果預設都會使用選取的調色盤,即使您在建立視覺效果時設定自訂色彩也一樣。 若要覆寫此行為,請參閱自訂視覺效果的色彩。
工作區系統管理員現在可以使用管理控制台建立自訂調色盤 。 建立自訂調色盤之後,就可以在新的和現有的儀表板中使用。 若要使用儀表板的自訂調色盤或加以自訂,您可以編輯儀表板設定。
當您從 SQL 功能表將使用參數的視覺效果新增至儀表板時,視覺效果現在預設會使用儀表板層級參數。 這符合您在儀表板中使用 [新增視覺效果] 按鈕新增小工具時的行為。
當您檢視查詢歷史記錄並依參數組合篩選清單時,現在會顯示相符查詢的數目。
在視覺效果中,已修正 Y 軸範圍無法調整為特定值的問題。
2022 年 2 月 3 日
預設會為所有使用者啟用索引標籤 SQL 編輯器。 如需詳細資訊或停用索引標籤編輯器,請參閱編輯多個查詢。
儀表板電子郵件訂閱者現在會接收到內嵌影像,其中顯示儀表板快照集,而不是附件。 快照集的 PDF 會附加至電子郵件。
您現在可以藉由設定 SQL 端點的現成執行個體原則來平衡可靠性和成本。 現成執行個體原則會決定背景工作角色只使用隨選執行個體,還是隨選執行個體和現成執行個體的組合。 成本優化 (預設值) 大部分會使用現成執行個體和一個隨選執行個體。 可靠性最佳化:只使用於隨需執行個體。 先前,隨選執行個體一律用於 SQL 端點。 若要保留此行為,請將現成執行個體原則設定為可靠性最佳化。 請參閱設定現成執行個體原則。
2022 年 1 月 27 日
已改善如何檢視、共用和匯入查詢的設定檔。 請參閱查詢配置檔。
[詳細資料] 視覺效果現在可讓您重新命名資料欄,就像資料表視覺效果一樣。
您現在可以在 SQL 編輯器中按下索引標籤來關閉索引標籤。
下列鍵盤捷徑已新增至索引標籤 SQL 編輯器:
- 關閉所有索引標籤:Cmd+Option+Shift+A (macOS) / Ctrl+Option+Shift+A (Windows)
- 關閉其他索引標籤:Cmd+Option+Shift+W (macOS) / Ctrl+Option+Shift+W (Windows)
這些鍵盤捷徑提供以滑鼠右鍵按下索引標籤以存取相同動作的替代方案。 若要檢視所有鍵盤捷徑,請按下 索引標籤式 SQL 編輯器中的鍵盤圖示。
2022 年 1 月 20 日
- 資料表中整數和 float 資料類型的預設格式設定已更新為不包含逗號。 這表示,根據預設,
10002343
之類的值將不再有逗號。 若要格式化這些類型以逗號顯示,請按下 [編輯視覺效果],展開資料欄的區域,並修改格式以包含逗號。 - 為了更符合瀏覽器轉譯限制,視覺效果現在最多會顯示 10,000 個資料點。 例如,散佈圖會顯示最多 10,000 個點。 如果資料點數目已受到限制,則會顯示警告。
2022 年 1 月 13 日
- 我們已修正 SQL 編輯器中的 [儲存] 按鈕有時已停用的問題。 [儲存] 按鈕現在一律會啟用,並在偵測到未儲存的變更時包含星號 (
*
)。
2021 年 12 月 15 日
- Databricks SQL 已正式推出。 這標誌著提供您第一個 Lakehouse 平台的主要里程碑,該平台會將資料、AI 和 BI 工作負載統一到一個地方。 透過 GA,您可以預期 Databricks 針對任務關鍵性工作負載提供最高層級的穩定性、支援和企業整備程度。 閱讀 GA 公告部落格以深入瞭解。
- 警示現在的排程與查詢無關。 當您建立新的警示並建立查詢時,系統會提示您也建立警示的排程。 如果您有存在的警示,我們已從原始查詢複製排程。 這項變更也可讓您設定 [以擁有者執行] 和 [以檢視人員執行] 查詢的警示。 透過查詢擁有者的認證在指定的警示排程上 [以擁有者執行] 執行查詢用。 透過警示建立者的認證在指定的警示排程上 [以檢視人員執行] 執行查詢。 請參閱什麼是 Databricks SQL 警示? 和 排程查詢。
- 您現在可以在 SQL 編輯器和儀表板中重新排序參數。
- 已展開建立熱度圖視覺效果的文件。 請參閱熱度圖選項。
2021 年 12 月 9 日
- 當您建立資料表視覺效果時,現在可以根據資料欄欄位的值,將資料欄的字型色彩設定為靜態值或值範圍。 常值會與閾值進行比較。 例如,若要將值超過
500000
的結果著色,請建立閾值> 500000
,而不是> 500,000
。 請參閱有條件地格式化資料欄色彩。 - 索引標籤式 SQL 編輯器架構瀏覽器中的圖示現在可讓您區分資料表和檢視。
2021 年 12 月 1 日
- 您現在可以在工作區層級套用 SQL 組態參數。 這些參數會自動套用至工作區中的所有現有和新的 SQL 端點。 請參閱設定 SQL 參數。
2021 年 11 月 18 日
當您檢視查詢的歷程記錄時,現在可以在執行查詢的服務主體上篩選查詢。 請參閱檢視查詢記錄。
您現在可以使用側邊欄捷徑來開啟 SQL 編輯器。 若要開啟 SQL 編輯器,請按下 [SQL 編輯器]。
如果您有建立資料科學和工程叢集的權限,您現在可以按下側邊欄中的 [建立],然後按下 [SQL 端點] 來建立 SQL 端點。
系統管理員現在可以透過 UI 將查詢、儀表板或警示的擁有權轉移給不同的使用者。 請參閱:
2021 年 11 月 4 日
- 在地圖 (Choropleth) 視覺效果中,圖例中色彩的漸層步驟數目上限已從 11 增加到 20。 預設值為 5 個漸層步驟,包含最小色彩和最大色彩。
- 索引標籤式 SQL 編輯器現在支援大量索引標籤管理。 如果您以滑鼠右鍵按一下索引標籤,會看到 [關閉其他項目]、[關閉左側項目]、[關閉右側項目]和[全部關閉]選項。 請注意,如果您在第一個或最後一個索引標籤上按下滑鼠右鍵,則不會看到 [關閉左側項目] 或 [關閉右側項目] 的選項。
2021 年 10 月 28 日
- 當您在目錄總管中檢視資料表時,有兩個選項可簡化與資料表的互動:
- 按下 [建立 > 查詢] 以建立查詢,以選取所有資料欄並傳回前 1000 個資料列。
- 按下 [建立 > 快速儀表板] 以開啟組態頁面,您可以在其中選取感興趣的資料欄,並建立儀表板和支持查詢,以使用這些資料欄提供一些基本資訊,並展示儀表板層級參數和其他功能。
2021 年 10 月 19 日
- 新的鍵盤捷徑現在可在索引標籤編輯器中使用:
- 開啟新索引標籤:
- Windows:
Cmd+Alt+T
- Mac:
Cmd+Option+T
- Windows:
- 關閉目前索引標籤
- Windows:
Cmd+Alt+W
- Mac:
Cmd+Option+W
- Windows:
- 開啟查詢對話方塊
- Windows:
Cmd+Alt+O
- Mac:
Cmd+Option+O
- Windows:
- 開啟新索引標籤:
2021 年 9 月 23 日
- 您現在可以藉由複製現有的儀表板來建立新的儀表板,只要您擁有儀表板和所有上游查詢的 CAN RUN、CAN EDIT 和 CAN MANAGE 權限。 請參閱複製舊版儀表板。
- 您現在可以在視覺效果中搭配多個 Y 軸資料欄使用
GROUP BY
。 請參閱散佈圖。 - 您現在可以使用
{{ @@yPercent}}
格式化未正規堆疊橫條圖中的資料標籤。 請參閱橫條圖。 - 如果您使用 SAML 驗證,且您的 SAML 認證會在幾分鐘內到期,現在系統會主動提示您再次登入,再執行查詢或重新整理儀表板。 這有助於防止因為查詢執行期間過期的認證而中斷。
2021 年 9 月 20 日
- 您現在可以使用權限 REST API 來傳輸儀表板、查詢和警示的擁有權。 請參閱查詢 ACL。
2021 年 9 月 16 日
- 在查詢結果中,當大於 9007199254740991 時,
BIGINT
結果現在會序列化為字串。 這會修正查詢結果中可能會截斷結果的問題BIGINT
。 其他整數結果仍會序列化為數字。 軸標籤和工具提示上的數位格式設定不適用於BIGINT
序列化為字串的結果。 如需 Databricks SQL 中資料類型的詳細資訊,請參閱 BIGINT 類型。
2021 年 9 月 7 日
Databricks 正推出一週內後續的變更。 在 9 月 7 日之後,您的工作區可能無法啟用這些變更。
Databricks SQL 現在處於公開預覽狀態,並已針對新工作區中的所有使用者啟用。
注意
如果您的工作區已在公開預覽期間為 Databricks SQL 啟用,也就是在 2021 年 9 月 7 日開始的一週之前,除非變更,否則使用者會保留在該日期之前指派的權利。 換句話說,如果使用者在公開預覽期間沒有 Databricks SQL 的存取權,除非系統管理員提供給他們,否則他們現在不會擁有。
系統管理員可以將 Databricks SQL 存取權 (在 API 中的
databricks-sql-access
) 指派給使用者或群組,來管理哪些使用者可以存取 Databricks SQL。 根據預設,新使用者具有此權利。系統管理員可以限制使用者或群組只存取 Databricks SQL,並防止他們從使用者或群組移除工作區存取權利 (在 API 中的
workspace-access
) 存取資料科學和工程或 Databricks Mosaic AI。 根據預設,新使用者具有此權利。重要
若要登入並存取 Azure Databricks,使用者必須具有 Databricks SQL 存取權或工作區存取權 (或兩者皆有)。
名為入門端點的小型傳統 SQL 端點已在所有工作區上預先設定,因此您可以立即開始建立儀表板、視覺效果和查詢。 若要處理更複雜的工作負載,您可以輕鬆地增加其大小 (以減少延遲) 或基礎叢集數目 (以處理更多並行使用者)。 若要管理成本,入門端點會設定為在閑置 120 分鐘後終止。
為了協助您快速啟動並執行,系統管理員和使用者可以使用新的引導式上線體驗。 依預設會顯示上線面板,而且您一定可以看到側邊欄中剩下多少上線工作。 按下左側的工作以重新開啟上線面板。
您可以在名為
SAMPLES
的唯讀目錄中,快速使用 Databricks SQL 與兩個豐富的資料集,此目錄可從所有工作區取得。 當您瞭解 Databricks SQL 時,可以使用這些架構來建立查詢、視覺效果和儀表板。 不需要設定,而且所有使用者都可以存取這些架構。nyctaxi
結構描述包含trips
資料表中的計程車車程資料。- 此
tpch
結構描述包含下表中的零售收入和供應鏈資料:customer
lineitem
nation
orders
part
partsupp
region
supplier
在上線面板按下 [執行您的第一個查詢],以產生
nyctaxi
結構描述的新查詢。若要瞭解如何在 Databricks SQL 中可視化資料,而不需要任何設定,您可以從儀表板範例庫匯入儀表板。 這些儀表板是由目錄中的
SAMPLES
資料集所提供。若要檢視儀表板範例庫,請按下上線面板中的 [匯入範例儀表板]。
您現在可以使用 CREATE FUNCTION 和 DROP FUNCTION 命令來建立和卸除原生 SQL 函式。
2021 年 9 月 2 日
儀表板上具有 CAN EDIT 權限的使用者現在可以管理儀表板的重新整理排程和訂用帳戶清單。 先前需要 CAN MANAGE 權限。 如需詳細資訊,請參閱自動重新整理儀表板。
根據預設,視覺效果不再根據傳回的結果數目動態重設大小,但不論結果數目為何,都會維持相同的高度。 若要返回先前的行為,並設定視覺效果以動態重設大小,請在儀表板的視覺效果設定中啟用動態調整面板高度 。 如需詳細資訊,請參閱資料表選項。
如果您有相同帳戶中多個工作區的存取權,您可以從 Databricks SQL 中切換工作區。 按下 Azure Databricks 工作區的左下角,然後選取要切換的工作區。
2021 年 8 月 12 日
- 系統管理員現在可以在執行時終止其他使用者的查詢。 如需詳細資訊,請參閱終止查詢執行。
2021 年 8 月 5 日
- 改善的
EXPLAIN
結果格式設定- 說明結果更容易讀取
- 格式化為無自動換行的單空格字元
2021 年 7 月 29 日
- 在查詢編輯器支援多個索引標籤時,處理多個查詢就變得更容易。 若要使用索引標籤編輯器,請參閱編輯多個查詢。
2021 年 7 月 8 日
- 儀表板中的視覺效果小工具現在有標題和描述,因此您可以將多個儀表板中使用的視覺效果標題和描述量身打造為儀表板本身。
- 側邊欄已更新,以改善可見度和瀏覽:
- 倉儲現在是 SQL 端點,而歷程記錄會重新命名為查詢歷史記錄。
- 帳戶設定 (先前稱為使用者) 已移至帳戶。 當您選取 [帳戶] 時,您可以變更 Azure Databricks 工作區並登出。
- 使用者設定已移至 [設定],並已分割成 [設定] 和 [SQL 管理控制台]。 只有系統管理員才能看到 SQL 管理控制台。
- 說明圖示已變更為 [說明]。
2021 年 7 月 1 日
- 新的目錄總管可讓您輕鬆地探索及管理資料庫和資料表的權限。 使用者可以檢視架構詳細資料、預覽範例資料,以及查看資料表詳細資料和屬性。 系統管理員可以檢視和變更資料物件擁有者,而資料物件擁有者可以授與和撤銷權限。 如需詳細資訊,請參閱什麼是目錄總管?。
- 水平圖表中的 Y 軸已更新,以反映與資料表相同的順序。 如果您先前已選取反向排序,可以使用 Y 軸索引標籤上的 [反向順序] 切換來反轉新的排序。
2021 年 6 月 23 日
- 使用服務主體輕鬆設定 SQL 端點。 現在有一個控制項可協助您在全域 SQL 端點設定中設定服務主體。 請參閱設定服務主體。
- 現在支援暫存檢視。
2021 年 6 月 17 日
- Photon,Databricks 的新向量化執行引擎,現在預設會開啟新建立的 SQL 端點 (UI 和 REST API)。 Photon 透明地加速
- 寫入 Parquet 和 Delta 資料表。
- 許多 SQL 查詢。 請參閱限制。
- 使用
CREATE GROUP
、DROP GROUP
、ALTER GROUP
、SHOW GROUPS
和SHOW USERS
命令輕鬆管理使用者和群組。 如需詳細資訊,請參閱 Security 陳述式和 Show 陳述式。 - 查詢編輯器結構描述瀏覽器在具有超過 100 個資料表的結構描述上更敏捷且更快速。 在這類架構上,結構描述瀏覽器不會自動載入所有資料欄;資料表清單仍然如往常顯示,但資料欄只會在您按兩下資料表時載入。 這項變更會影響查詢編輯器中的查詢自動完成,因為它仰賴此資訊來顯示建議。 在您展開資料表並載入其資料欄之前,無法使用這些建議。
2021 年 6 月 03 日
- 新啟用 Azure Databricks 工作區的系統管理員現在預設會收到 Databricks SQL 權利,而且不再需要使用管理控制台來提供 Databricks SQL 存取權。
- Photon 現在處於公開預覽狀態,新的 SQL 端點預設為啟用。
- 多重叢集負載平衡現在處於公開預覽狀態。
- 您現在可以使用 CAN EDIT 權限,在儀表板和查詢上啟用與組織其他成員的共同作業。 請參閱存取控制清單。
2021 年 5 月 26 日
- SQL 分析會重新命名為 Databricks SQL。 這項變更對客戶的影響如下:
Web UI 中的參考已更新。
已重新命名授與存取 Databricks SQL 的權利:
- UI:Databricks SQL 存取權 (先前為 SQL 分析存取權)
- SCIM API:
databricks-sql-access
(先前sql-analytics-access
)
具有先前權利的使用者、群組和服務主體已移轉至新的權利。
與 Databricks SQL 相關的稽核記錄事件的標籤已變更:
- Databricks SQL 事件的前置詞現在是
databrickssql
。 changeSqlAnalyticsAcl
現在為changeDatabricksSqlAcl
。
- Databricks SQL 事件的前置詞現在是
- 儀表板更新
- 儀表板匯出檔名已更新為儀表板 + 時間戳記的名稱,而不是 UUID。
- 匯出記錄限制已從 22k 提高到 64k。
2021 年 5 月 20 日
您可以在 Azure Key Vault 中使用自己的金鑰來加密儲存在 Azure Databricks 的 Databricks SQL 查詢和查詢歷史記錄。 如果您已為工作區設定自己的金鑰來加密受管理的服務資料 (筆記本和密碼),則不需要採取進一步的動作。 受管理服務的相同客戶自控金鑰現在也會加密 Databricks SQL 查詢和查詢歷史記錄。 請參閱受管理服務的客戶自控金鑰。 這項變更只會影響待用儲存的新資料。 目前所儲存的 Databricks SQL 查詢和查詢歷史記錄不保證會使用此金鑰加密。
Databricks SQL 查詢結果會儲存在 Azure Databricks 在工作區設定期間建立的根 Azure Blob 記憶體執行個體中,而不會由受管理服務金鑰加密。 不過,您可以使用自己的金鑰進行加密。 請參閱DBFS 根目錄的客戶自控金鑰。
此功能適用於進階方案。
[過去執行] 索引標籤現在會顯示相對時間。
2021 年 5 月 13 日
Databricks SQL 不再嘗試猜測資料欄類型。 先前,格式的資料
xxxx-yy-dd
資料欄會自動視為日期,即使它是標識代碼也一樣。 既然該資料欄不再自動視為日期。 如有需要,您必須在查詢中指定。 這項變更可能會導致依賴先前行為的一些視覺效果而無法再運作。 在此版本中,您可以變更 >[設定]> [回溯相容性]選項,以返回先前的行為。 在未來版本中,我們將移除該功能。查詢編輯器現在有查詢進度列指示器。 狀態變更現在會顯示在持續更新的進度列中。
2021 年 5 月 6 日
您現在可以將儀表板的內容下載為 PDF。 請參閱下載為 PDF。
管理使用者現在可檢視所有查詢和儀表板的存取權。 在此檢視中,系統管理員可以檢視及刪除任何查詢或儀表板。 不過,如果查詢或儀表板未與系統管理員共用,系統管理員就無法編輯查詢或儀表板。請參閱查詢管理員檢視和舊版儀表板管理員檢視。
使用多重叢集負載平衡來增加端點並行的能力現在適用於所有帳戶。 您可以建立端點,以在指定的最小和最大叢集計數之間自動調整。 多載端點將會擴大,且已載入的端點將會縮小。
2021 年 4 月 29 日
- 查詢選項與詳細資料現在會組織在查詢編輯器左側的一組索引標籤中:
2021 年 4 月 22 日
- 已修正端點無法存取且因內部錯誤而似乎遭到刪除的問題。
2021 年 4 月 16 日
Databricks SQL 會維護與 Apache Spark SQL 語意的相容性。 此版本會更新語意,以符合 Apache Spark 3.1 的語意。 先前 Databricks SQL 已對齊 Apache Spark 3.0 語意。
- 統計彙總函式,包括
std
、stddev
、stddev_samp
、variance
、var_samp
、skewness
、kurtosis
、covar_samp
和corr
,在表達式評估期間發生Double.NaN
,將會傳回NULL
而非DivideByZero
,例如,stddev_samp
套用至單一元素集時。 這個版本之前,它會傳回Double.NaN
。 grouping_id()
會傳回長數值。 在此版本之前,此函式會傳回 int 值。- 查詢計劃說明結果現在已格式化。
- 如果指定的日期時間模式無效,則
from_unixtime
、unix_timestamp
、to_unix_timestamp
、to_timestamp
和to_date
將會失敗。 在此版本之前,他們傳回NULL
。 - Parquet、ORC、Avro 和 JSON 資料源擲回例外狀況
org.apache.spark.sql.AnalysisException
:「如果在最上層資料欄以及巢狀結構中偵測到重複的名稱,則會在讀取的資料結構描述中找到重複的資料欄。」 - 結構與對應會由
{}
括弧裝合,以將它們投射成字串。 例如,show()
動作和CAST
表達式會使用這類括弧。在此版本之前,d 括弧會用於相同的用途。 - 結構、陣列和對應的 NULL 元素會轉換成 「null」,以將它們投射成字串。 在此版本之前,
NULL
元素會轉換成空字串。 - 十進位類型資料欄溢位的總和會傳回 null。 在此版本之前,在此情況下,十進位類型資料欄的總和可能會傳回 Null 或不正確的結果,或甚至會在執行階段失敗 (視實際的查詢計劃執行而定)。
IllegalArgumentException
會針對不完整的間隔常值傳回,例如,INTERVAL '1'
、INTERVAL '1 DAY 2'
無效。 在此版本之前,這些常值會產生 NUL。- 如果時間戳記在
1900-01-01 00:00:00Z
之前,並載入 (儲存) 做為INT96
類型,則在入與儲存往返 Parquet 檔案的時間戳會失敗。 在此版本之前,動作不會失敗,但是可能會因為 Julian 與 Proleptic Gregorian 日曆之間往返的重新定位而導致輸入時間戳記的轉移。 schema_of_json
和schema_of_csv
函式會以 SQL 格式傳回括住欄位名稱的結構描述。 在此版本之前,函式會傳回目錄字串,而不傳回欄位引文和小寫字母。- 資料表結構描述支援
CHAR
、CHARACTER
和VARCHAR
類型。 資料表掃描和插入會遵守 char/varchar 語意。 如果 char/varchar 用於資料表結構描述以外的位置,則會擲回例外狀況 (CAST 是只將 char/varchar 視為字串的例外狀況,就像之前一樣)。 - 從 Hive 外部目錄擲回資料表的下列例外狀況:
- 如果新的分割區已經存在,則
ALTER TABLE .. ADD PARTITION
會擲回PartitionsAlreadyExistException
。 - 針對不存在的資料分割,則
ALTER TABLE .. DROP PARTITION
擲回NoSuchPartitionsException
。
- 如果新的分割區已經存在,則
2021 年 4 月 13 日
- 已改善使用 SQL 端點佇列的查詢輸送量。 當執行查詢已經讓端點飽和時,現在提交給 SQL 端點的查詢會佇列。 這可藉由不要求多載端點來改善查詢輸送量。 您可以在端點監視畫面中檢視改善的效能。
2021 年 4 月 1 日
- 快速找出查詢歷史記錄中查詢的編譯、執行和結果擷取所花費的時間。 請參閱查詢配置檔。 先前只有按下查詢並開啟 [執行詳細資料] 索引標籤,才能使用這項資訊。
- SQL 端點不再超過指定的叢集上限。 配置給 SQL 端點的所有叢集都會在 24 小時後回收,這可以建立一個簡短的視窗,其中還有一個額外的叢集。
2021 年 3 月 18 日
- 查詢編輯器中的自動完成現在支援 Databricks SQL 語法,且感知內容和別名。 請參閱建立查詢。
- JDBC 和 ODBC 要求在伺服器工作階段逾時之後,不再失敗,且工作階段錯誤無效。 BI 用戶端現在可以在工作階段逾時時順暢地復原。
2021 年 3 月 11 日
- 針對 Databricks SQL 新啟用工作區中的系統管理員和使用者,不再自動擁有 Databricks SQL 的存取權。 若要啟用 Databricks SQL 的存取權,系統管理員必須:
- 移至管理員設定頁面。
- 按一下 [使用者] 索引標籤。
- 在帳戶的資料列中,按下 [Databricks SQL 存取] 核取方塊。
- 按一下 [確認]。
- 重複步驟 3 和 4,將 Databricks SQL 的存取權授與使用者,或授與群組的存取權。
- 在側邊欄頂端選取 新增 > [查詢 | 儀錶板 | 警示],輕鬆建立查詢、儀表板和警示。
- 查詢編輯器 現在會儲存草稿,而且您可以還原為已儲存的查詢。 請參閱在 SQL 編輯器中撰寫查詢和探索資料。
- 您無法再建立外部資料來源。
- SQL 端點監視圖表的可靠性已改善。 圖表不再間歇性地顯示假的錯誤訊息。
2021 年 3 月 4 日
現在已推出查詢、儀表板和警示 API 文件。 請參閱Databricks REST API 參考。
現在一律會執行排程的儀表板重新整理。 重新整理會在 Web 應用程式中執行,因此您不再需要在瀏覽器中保持儀表板開啟。 請參閱自動重新整理儀表板。
現在已啟用自動停止使用 SQL 倉儲 API 建立的新 SQL 端點,預設逾時為兩小時。
Tableau Online 使用者現在可以連線到 SQL 端點。 請參閱新的 Tableau Online 快速入門。
2021 年 2 月 26 日
現在已正式推出 2020 年 9 月公開預覽發行的新 Azure Databricks Power BI 連接器。 提供:
- 簡單連線設定:新的 Power BI Azure Databricks 連接器已整合到 Power BI 中,而且您可以使用簡單的對話方塊進行設定,並按幾下滑鼠。
- 根據 Microsoft Entra ID 認證進行驗證—不再需要系統管理員設定 PAT 權杖。
- 透過新的 Azure Databricks ODBC 驅動程式,更快速地匯入和最佳化中繼資料呼叫,其具有顯著的效能改善。
- 透過 Power BI存取 Azure Databricks 資料會遵循 Azure Databricks 資料表訪問控制,以及與您 Microsoft Entra ID 身分識別相關聯的 Azure 儲存體帳戶權限。
如需詳細資訊,請參閱將 Power BI 連線到 Azure Databricks。
2021 年 2 月 25 日
- 現在,在 SQL 端點上設定權限會更快。 這是在您建立新的 SQL 端點,並可在編輯現有端點時輕鬆存取的步驟。 請參閱什麼是 SQL 倉儲和管理 SQL 倉儲。
- 若要重複使用視覺效果設定,您現在可以複製視覺效果。 請參閱複製視覺效果。
- 查詢結果現在會儲存在您的帳戶中,而不是 Azure Databricks 帳戶。
- 若要藉由列出物件上所有已定義的權限來防止資訊外洩,若要執行
SHOW GRANTS [<user>] <object>
,您必須執行下列其中一項:- Databricks SQL 系統管理員或
<object>
的擁有者。 [<user>]
中指定使用者。
- Databricks SQL 系統管理員或
2021 年 1 月 07 日
- 為了減少閒置端點的費用,新的 SQL 端點現在已啟用自動停止,預設逾時為兩小時。 觸達逾時之後,端點就會停止。 您可以編輯逾時期間,或隨時停用自動停止。
- 除了
TEXT
類型查詢參數之外,不再將引號新增至查詢參數。 如果您已使用Dropdown List
、Query Based Dropdown List
或任何Date
類型的查詢參數,則必須新增引號,查詢才能運作。 例如,如果您的查詢是SELECT {{ d }}
,則此查詢現在必須是SELECT '{{ d }}'
。
2020 年 11 月 18 日
Databricks 很高興介紹 Databricks SQL 的公開預覽,這是一個直覺式的環境,可用來執行臨機操作查詢,以及在儲存在資料湖中的資料上建立儀表板。 Databricks SQL 可讓組織操作多雲端 Lakehouse 結構,以提供資料倉儲效能與資料湖經濟。 Databricks SQL:
- 與現今使用的 BI 工具整合,例如 Tableau 和 Microsoft Power BI,以查詢資料湖中最完整且最新的資料。
- 使用 SQL 原生介面來補充現有的 BI 工具,讓資料分析師和資料科學家可以直接在 Azure Databricks 內查詢資料湖資料。
- 可讓您透過豐富的視覺效果和拖放儀表板來共用查詢深入解析,並自動警示重要資料變更。
- 使用連線至 SQL 倉儲,將可靠性、品質、規模、安全性和效能提升至資料湖,讓您可以使用最新且完整的資料執行傳統分析工作負載。
USAGE
引進了簡化資料存取管理的權限。 若要在架構中使用物件,除了執行動作所需的任何權限之外,還必須授與該架構的 USAGE 權限。 權限USAGE
可以授與架構或目錄。 對於已經使用資料表存取控制的工作區,USAGE
權限會自動授與根CATALOG
上的使用者群組。 如需詳細資訊,請參閱 Hive 中繼存放區權限和安全性實體物件 (舊版)。
請參閱什麼是 Azure Databricks 上的資料倉儲?以瞭解詳細資訊。
已修正的問題
- SQL 編輯器。 在查詢索引標籤之間切換時,SQL 編輯器現在會保存選取的文字和捲動位置。
- SQL 編輯器。 如果您在 SQL 編輯器中的查詢上按下 [執行],則瀏覽至另一個頁面,並在查詢仍在執行時傳回,編輯器會顯示正確的查詢狀態。 如果您在另一個頁面上完成查詢,查詢結果將會傳回 SQL 編輯器頁面。
- 您現在可以使用 MySQL 8.0 做為外部中繼存放區。
- 差異資料表上的
DESCRIBE DETAIL
命令不再因java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
失敗 - 讀取具有
INT96
時間戳記的 Parquet 檔案不再失敗。 - 當使用者具有查詢的 CAN RUN 權限並執行查詢時,如果查詢是由其他使用者建立,則查詢歷史記錄會將查詢的執行器顯示為使用者。
- 轉譯圖表時,現在會忽略 Null 值,以改善圖表的可用性。 例如,先前,橫條圖中的橫條在 Null 值存在時看起來會非常小。 現在軸只會根據非 Null 值進行設定。
已知問題
- 從多叢集負載平衡 SQL 端點中 Delta Lake 以外的資料來源讀取可能會不一致。
- Databricks SQL 中存取的差異資料表會將其架構和資料表屬性上傳至設定的中繼存放區。 如果您使用外部中繼存放區,您將能夠在中繼存放區中看到 Delta Lake 資訊。 Delta Lake 會盡量讓此資訊保持在最新狀態。 您也可以使用
DESCRIBE <table>
命令來確保中繼存放區中的資訊已更新。 - Databricks SQL 不支援區域位移,例如 'GMT+8' 做為工作階段時區。 因應措施是改用區域時區 https://en.wikipedia.org/wiki/List_of_tz_database_time_zones),例如『Etc/GMT+8』。 如需設定時區的詳細資訊,請參閱設定時區。
常見問題集 (FAQ)
- Databricks SQL 工作負載如何計費?
- SQL 端點在何處執行?
- 我是否可以從資料科學和工程工作區 SQL 筆記本使用 SQL 端點?
- 我已獲得使用雲端提供者認證的資料存取權。 為什麼我在 Databricks SQL 中無法存取此資料?
Databricks SQL 工作負載如何計費?
Databricks SQL 工作負載會根據標準作業計算 SKU 收費。
SQL 端點在何處執行?
如同 Azure Databricks 叢集,SQL 端點會在您的 Azure 帳戶中建立和管理。 SQL 端點會自動在您的帳戶中管理 SQL 最佳化叢集,並調整以符合使用者需求。
我是否可以從資料科學和工程工作區 SQL 筆記本使用 SQL 端點?
否。 您可以從 Databricks SQL 查詢、BI 工具和其他 JDBC 和 ODBC 使用者端使用 SQL 端點。
我已獲得使用雲端提供者認證的資料存取權。 為什麼我在 Databricks SQL 中無法存取此資料?
在 Databricks SQL 中,所有資料存取都會受到資料訪問控制,而系統管理員或資料擁有者必須先授與您適當的權限。