Freigeben über


Versionshinweise zu Databricks SQL

In diesem Artikel finden Sie neue Databricks SQL-Features und Verbesserungen sowie bekannte Probleme und häufig gestellte Fragen.

Releaseprozess

Databricks veröffentlicht fortlaufend Updates für die Benutzeroberfläche der Databricks SQL-Webanwendung, wobei alle Benutzer die gleichen Updates erhalten, die innerhalb eines kurzen Zeitraums eingeführt werden.

Darüber hinaus veröffentlicht Databricks normalerweise regelmäßig neue Computeversionen für SQL-Warehouses. Es stehen immer zwei Kanäle zur Verfügung: der Vorschaukanal und der aktuelle Kanal.

Hinweis

Releases werden gestaffelt. Es kann sein, dass Ihr Databricks-Konto erst eine Woche oder länger nach dem ursprünglichen Veröffentlichungsdatum mit einer neuen SQL-Warehouse-Version oder Databricks-SQL-Funktion aktualisiert wird.

Hinweis

Databricks SQL Serverless ist in Azure China nicht verfügbar. Databricks SQL ist in Azure Government-Regionen nicht verfügbar.

Channels

Kanäle ermöglichen es Ihnen, die gewünschte Computeversion für das SQL-Warehouse auszuwählen (Aktuell oder Vorschau). Vorschauversionen bieten Ihnen die Möglichkeit, Funktionen zu testen, bevor sie zum Databricks SQL-Standard werden. Nutzen Sie Vorschauversionen, um Ihre Produktionsabfragen und Dashboards auf Basis bevorstehender Änderungen zu testen.

In der Regel wird eine Vorschauversion etwa zwei Wochen nach ihrer Freigabe für den Vorschaukanal in den aktuellen Kanal übertragen. Einige Features, wie z. B. Sicherheitsfunktionen, Wartungsupdates und Fehlerbehebungen, werden möglicherweise direkt für den aktuellen Kanal freigegeben. Von Zeit zu Zeit veröffentlicht Databricks eine Vorschauversion möglicherweise nach einem anderen Zeitplan im aktuellen Kanal. Jede neue Version wird in den folgenden Abschnitten angekündigt.

Wie Sie ein vorhandenes SQL-Warehouse auf den Vorschaukanal umstellen, erfahren Sie unter Vorschaukanäle. Die in den Abschnitten „Updates der Benutzeroberfläche“ aufgeführten Features sind unabhängig von den Computeversionen für SQL-Warehouses, die in den Versionshinweisen im Abschnitt Behobene Probleme beschrieben sind.

Verfügbare Databricks SQL-Versionen

Aktueller Kanal: Databricks SQL-Version 2024.40

21. November 2024

SQL Warehouse-Systemtabellen (Öffentliche Vorschau)

  • Die system.compute.warehouses Tabelle zeichnet auf, wann SQL-Lagerhäuser erstellt, bearbeitet und gelöscht werden. Sie können die Tabelle verwenden, um Änderungen an Lagereinstellungen zu überwachen, einschließlich Lagernamen, Typ, Größe, Kanal, Tags, AutoStopp- und Autocaling-Einstellungen. Siehe Warehouses-Systemtabellenreferenz.

Datenermittlung

  • Die Registerkarte "Linie " im Katalog-Explorer wurde mit einer verbesserten Benutzeroberfläche für die Entitätsfilterung neu gestaltet.

13. November 2024

Legacy-Dashboards:

  • Es wurde ein Problem behoben, bei dem vorlagenbasierte QuickInfos keine detaillierten Inhalte für Zweiachsen- und Mehrfeldachsendiagramme angezeigt wurden.

6. November 2024

Unterstützung für lesbare Zeitpläne für SQL-Streamingtabellen von Databricks und materialisierte Ansichten

Benutzer können jetzt Zeitpläne für Streamingtabellen und materialisierte Ansichten mithilfe von lesbarer Syntax in der CroN-Planung starten, erstellen und ändern. Siehe ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEW und CREATE STREAMING TABLE.

Streamingtabellen unterstützen jetzt Zeitreiseabfragen

Sie können jetzt Zeitreisen verwenden, um frühere Tabellenversionen basierend auf dem Zeitstempel oder der Tabellenversion (wie im Transaktionsprotokoll aufgezeichnet) abzufragen. Möglicherweise müssen Sie Ihre Streamingtabelle aktualisieren, bevor Sie Zeitreiseabfragen verwenden. Weitere Informationen finden Sie unter Was ist die Delta Lake-Zeitreise?.

Zeitreiseabfragen werden für materialisierte Ansichten nicht unterstützt.

31. Oktober 2024

Aktualisierungen der Benutzeroberfläche

Neuer SQL-Editor (Öffentliche Vorschau)

  • Sie können nun die aktive SQL-Abfrage mit der Tastenkombination Command (oder Ctrl) + Shift + Enterausführen.
  • Der Parametereingabebereich zeigt nun eine Bildlaufleiste an, wenn sich der Text außerhalb des Anzeigefensters erstreckt.
  • Es wurde ein Problem behoben, durch das die Seite mit den Abfrageprofildetails nicht vollständig geöffnet wurde.
  • Sie können Abfragen jetzt umbenennen, indem Sie den neuen Namen in den Registerkartentitel eingeben.
  • Die Schaltfläche "Zeitplan " ist jetzt für Abfragen deaktiviert, die noch nie gespeichert wurden.

24. Oktober 2024

Versionshinweise für KI/BI-Tools

Die Versionshinweise für AI/BI-Dashboards und AI/BI Genie wurden in die Versionshinweise zu AI/BI verschoben. Zukünftige Versionen und Updates werden dort dokumentiert.

17. Oktober 2024

Benachrichtigungsziele sind jetzt allgemein verfügbar

Sie können Benachrichtigungsziele erstellen und konfigurieren, die Arbeitsbereichsbenutzer bestimmten Workflows hinzufügen können, z. B. Warnungen, Datenbricks-Aufträge und AI/BI-Dashboardzeitpläne, um E-Mails oder Webhooks zu senden, wenn ein Ereignis ausgeführt wird. Weitere Informationen finden Sie unter Verwalten von Benachrichtigungszielen.

10. Oktober 2024

Materialisierte Ansichten und Streamingtabellen sind jetzt allgemein in Databricks SQL verfügbar

Streamingtabellen ermöglichen die inkrementelle Erfassung von Cloudspeicher- und Nachrichtenwarteschlangen, während materialisierte Ansichten vorab berechnete Ansichten sind, die automatisch und inkrementell aktualisiert werden, wenn neue Daten eintreffen. Siehe Verwenden materialisierter Ansichten in Databricks SQL und Laden von Daten mithilfe von Streamingtabellen in Databricks SQL.

Abfrageerkenntnisse

3. Oktober 2024

Unterstützung für serverlose SQL-Warehouses erweitert

Serverlose SQL-Warehouses sind jetzt in der Region swedencentral verfügbar. Weitere Informationen finden Sie unter Features mit eingeschränkter regionaler Verfügbarkeit.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Katalog-Explorer

  • KI-generierte Kommentare werden jetzt für Kataloge, Schemas, Volumes, Modelle und Funktionen unterstützt. Außerdem können Benutzer*innen Kommentare mit dem Inline-Chatassistenten bearbeiten.

SQL-KI-Funktionen: Die Funktion vector_search() ist jetzt in der Public Preview verfügbar. Weitere Informationen finden Sie unter vector_search-Funktion.

26. September 2024

Unterstützung für serverlose SQL-Warehouses erweitert

Serverlose SQL-Warehouses sind jetzt in der Region francecentral verfügbar. Weitere Informationen finden Sie unter Features mit eingeschränkter regionaler Verfügbarkeit.

11. September 2024

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

SQL-Editor

Ab sofort können Sie die Syntax für benannte Parametermarkierungen im SQL-Editor verwenden. Die Syntax für benannte Parametermarkierungen kann im SQL-Editor, in Notebooks und in KI/BI-Dashboards genutzt werden. Siehe Arbeiten mit Abfrageparametern.

Abfragen und Vorversion-Dashboards

Bei SQL-Abfragen und Vorversion-Dashboards werden gelöschte Elemente nicht mehr auf den Listenseiten angezeigt. Gelöschte Elemente finden Sie im Papierkorbordner des Arbeitsbereichs. Arbeitsbereichsadmins können gelöschte Elemente in den Papierkorbordnern aller Benutzer*innen anzeigen.

5. September 2024

Änderungen in Version 2024.40

Databricks SQL Version 2024.40 enthält die folgenden Verhaltensänderungen, neue Features und Verbesserungen.

Änderungen des Verhaltens

  • Wechseln zum Standardschema-Bindungsmodus für Ansichten

    Ansichten passen sich jetzt an Schemaänderungen in der zugrunde liegenden Abfrage an, indem sie die Schemakompensierung mit regulären Umwandlungsregeln verwenden. Dies ist eine Änderung gegenüber dem vorherigen Standardmodus BINDING, der Fehler ausgelöst hat, wenn eine sichere Umwandlung beim Verweisen auf die Ansicht nicht ausgeführt werden konnte.

    Weitere Informationen finden Sie unter CREATE VIEW and cast-Funktion.

  • Verbieten der Verwendung der nicht dokumentierten !-Syntax anstelle von NOT außerhalb boolescher Ausdrücke

    Bei dieser Version ist die Verwendung von ! als Synonym für NOT außerhalb von booleschen Ausdrücken nicht mehr zulässig. Beispiel: Anweisungen wie die folgenden: CREATE ... IF ! EXISTS, IS ! NULL, eine ! NULL-Spalteneigenschaft oder -Feldeigenschaft, ! IN und ! BETWEEN muss ersetzt werden durch: CREATE ... IF NOT EXISTS, IS NOT NULL, eine NOT NULL-Spalten- oder Feldeigenschaft, NOT IN und NOT BETWEEN.

    Diese Änderung gewährleistet Konsistenz, entspricht dem SQL-Standard und macht SQL portierbarer.

    Der boolesche Präfixoperator ! (z. B. !is_mgr oder !(true AND false)) ist von dieser Änderung nicht betroffen.

  • Verbieten der nicht dokumentierten Spaltendefinitionssyntax in Ansichten

    Databricks unterstützt CREATE VIEW mit benannten Spalten und Spaltenkommentaren. Zuvor war die Spezifikation von Spaltentypen, NOT NULL-Einschränkungen oder DEFAULT zulässig. Bei dieser Version können Sie diese Syntax nicht mehr verwenden.

    Diese Änderung gewährleistet Konsistenz, entspricht dem SQL-Standard und unterstützt künftige Erweiterungen.

  • Durch das Hinzufügen einer CHECK-Einschränkung für eine ungültige Spalte wird jetzt die Fehlerklasse UNRESOLVED_COLUMN.WITH_SUGGESTION zurückgegeben

    Um nützlichere Fehlermeldungen bereitzustellen, gibt in Databricks Runtime 15.3 und höher eine ALTER TABLE ADD CONSTRAINT Anweisung, die eine CHECK Einschränkung enthält, die auf einen ungültigen Spaltennamen verweist, die UNRESOLVED_COLUMN.WITH_SUGGESTION Fehlerklasse zurück. Zuvor wurde ein INTERNAL_ERROR Wert zurückgegeben.

Neue Features und Verbesserungen

  • Aktivieren von UniForm Iceberg mithilfe von ALTER TABLE

    Sie können UniForm Iceberg jetzt für vorhandene Tabellen aktivieren, ohne Datendateien neu zu schreiben. Weitere Informationen finden Sie unter Aktivieren durch Verändern einer vorhandenen Tabelle.

  • UTF-8-Gültigkeitsprüfungsfunktionen

    In dieser Version werden die folgenden Funktionen zum Validieren von UTF-8-Zeichenketten eingeführt:

    • is_valid_utf8 überprüft, ob eine Zeichenfolge eine gültige UTF-8-Zeichenkette ist.
    • make_valid_utf8 konvertiert eine potenziell ungültige UTF-8-Zeichenkette in eine gültige UTF-8-Zeichenkette mit Ersetzungszeichen.
    • validate_utf8 löst einen Fehler aus, wenn die Eingabe keine gültige UTF-8-Zeichenkette ist.
    • try_validate_utf8 gibt NULL zurück, wenn die Eingabe keine gültige UTF-8-Zeichenkette ist.
  • funktionen to_avro und from_avro

    Die funktionen to_avro und from_avro ermöglichen die Konvertierung von SQL-Typen in Avro-Binärdaten und -zurück.

  • try_url_decode-Funktion

    Mit diesem Release wird die try_url_decode-Funktion eingeführt, die eine mit URL verschlüsselte Zeichenfolge entschlüsselt. Wenn die Zeichenfolge nicht das richtige Format hat, gibt die Funktion NULL zurück, anstatt einen Fehler zu auslösen.

  • Optionales Zulassen, dass der Optimierer auf nicht erzwungenen Fremdschlüsseleinschränkungen basiert

    Um die Abfrageleistung zu verbessern, können Sie jetzt das Keyword RELY für FOREIGN KEY-Einschränkungen angeben, wenn Sie CREATE oder ALTER für eine Tabelle verwenden.

  • Unterstützung für das Löschen der Funktion zum Überprüfen von Einschränkungen in Tabellen

    Selektive Überschreibungen mit replaceWhere führen jetzt Aufträge aus, die Daten löschen und neue Daten parallel einfügen, wodurch Abfrageleistung und Clusterauslastung verbessert werden.

  • Parallelisierter Auftrag wird für selektive Überschreibungen ausgeführt

    Selektive Überschreibungen mit replaceWhere führen jetzt Aufträge aus, die Daten löschen und neue Daten parallel einfügen, wodurch Abfrageleistung und Clusterauslastung verbessert werden.

  • Verbesserte Leistung für Änderungsdatenfeeds mit selektiven Überschreibungen

    Selektive Überschreibungen mithilfe von replaceWhere in Tabellen mit Änderungsdatenfeed schreiben keine separaten Änderungsdatendateien für eingefügte Daten mehr. Diese Vorgänge verwenden eine ausgeblendete _change_type-Spalte, die in den zugrunde liegenden Parquet-Datendateien vorhanden ist, um Änderungen ohne Schreibverstärkung aufzuzeichnen.

  • Verbesserte Abfragelatenz für den Befehl COPY INTO

    Diese Version enthält eine Änderung, die die Abfragelatenz für den COPY INTO Befehl verbessert. Diese Verbesserung wird implementiert, indem das Laden des Zustands durch den RocksDB-Zustandsspeicher asynchron wird. Dank dieser Änderung sollten Sie eine Verbesserung der Startzeiten für Abfragen mit großen Zuständen feststellen,wie Abfragen mit einer großen Anzahl bereits erfasster Dateien.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Visualisierungen

  • QuickInfo-Summen werden jetzt nur für gestapelte Diagramme angezeigt.

22. August 2024

Visualisierungen

Bei gruppierten Konfigurationen und Konfigurationen für mehrere Felder zeigen QuickInfos jetzt Summen an, wenn Sie mit dem Mauszeiger auf Diagrammelemente zeigen.

15. August 2024

Visualisierungen

Es wurde ein Problem behoben, bei dem Zeilennummern in Tabellenvisualisierungen nach dem Ändern der Seitengröße nicht aktualisiert wurden.

Datenermittlung

Die Möglichkeit zum Erweitern und Zuklappen geschachtelter komplexer Spaltentypen in Unity Catalog-Tabellen wird jetzt unterstützt.

1. August 2024

Visualisierungen:

  • Die Tabellensortierung wird jetzt beibehalten, wenn sich Daten aufgrund der Filterung ändern.

SQL-Editor:

  • Erhöhte Lesbarkeit durch Hinzufügen zusätzlicher Abstände zwischen der letzten Zeile einer Abfrage und der Ergebnisausgabe.

25. Juli 2024

Databricks REST-API:

  • APIs zum Verwalten von Abfragen, Warnungen, Datenquellen und Berechtigungen wurden geändert. Die Legacy-API wird noch weitere sechs Monate unterstützt. Dieser Übergangszeitraum soll Ihnen ausreichend Zeit geben, um Ihre Anwendungen und Integrationen zur neuen Version zu migrieren, bevor die ältere Version beendet wird. Weitere Informationen finden Sie unter Aktualisieren auf die neueste Databricks-SQL-API-Version

18. Juli 2024

Aktualisierungen der Benutzeroberfläche

Katalog-Explorer:

  • Ein neuer Katalogkonfigurations-Assistent ist jetzt zum Einrichten von Arbeitsbereichsbindungen, Katalogrechten und Metadaten beim Erstellen eines Katalogs verfügbar.

SQL Warehouse-Überwachung:

  • Die KANN ÜBERWACHEN-Berechtigung ist jetzt allgemein verfügbar. Sie ermöglicht es privilegierten benutzenden Personen, SQL-Warehouses zu überwachen, einschließlich dem zugehörigen Abfrageverlauf und den Abfrageprofilen. Siehe Vektorsuchendpunkt-ACLs.

11. Juli 2024

Databricks SQL-Version 2024.35 verfügbar

Rolloutzeitplan: Rollout der Vorschauversion für 2024.35: Zwischen dem 9. Juli und dem 15. Juli

Änderungen in Version 2024.35

Deaktivieren der Spaltenzuordnung mit Drop-Feature

Sie können jetzt DROP FEATURE benutzen, um die Spaltenzuordnung in Delta-Tabellen zu deaktivieren und das Tabellenprotokoll herabzustufen. Siehe Spaltenzuordnung deaktivieren.

Syntax und Funktionen des Variant-Typs in der öffentlichen Vorschau

Integrierte Apache Spark-Unterstützung für die Arbeit mit halbstrukturierten Daten als VARIANT Typ ist jetzt in Spark DataFrames und SQL verfügbar. Siehe Abfragevariantendaten.

Variant-Typunterstützung für Delta Lake in der öffentlichen Vorschauversion

Sie können jetzt VARIANT benutzen, um halbstrukturierte Daten in Tabellen zu speichern, die von Delta Lake unterstützt werden. Siehe Unterstützung von Varianten im Delta Lake.

Unterstützung für verschiedene Modi der Schemaentwicklung in Ansichten

Mit ANSICHT ERSTELLEN und ANSICHT ÄNDERN können Sie jetzt einen Schemabindungsmodus festlegen und verbessern, wie Ansichten Schemaänderungen in zugrunde liegenden Objekten behandeln. Dieses Feature ermöglicht es Ansichten, Schemaänderungen in den zugrunde liegenden Objekten zu tolerieren oder anzupassen. Es behandelt Änderungen im Abfrageschema, die sich aus Änderungen an Objektdefinitionen ergeben.

Leistungsverbesserungen für einige Fensterfunktionen

Dieser Release enthält eine Änderung, die die Leistung einiger Spark-Fensterfunktionen verbessert, insbesondere Funktionen, die keine ORDER BY-Klausel und keinen window_frame-Parameter enthalten. In diesen Fällen kann das System die Abfrage neu schreiben, um sie mit einer Aggregatfunktion auszuführen. Mit dieser Änderung kann die Abfrage schneller ausgeführt werden, indem eine partielle Aggregation verwendet wird und Mehraufwand durch ausgeführte Fensterfunktionen vermieden wird. Der Spark-Konfigurationsparameter spark.databricks.optimizer.replaceWindowsWithAggregates.enabled steuert diese Optimierung und ist standardmäßig auf true festgelegt. Um diese Optimierung zu deaktivieren, legen Sie spark.databricks.optimizer.replaceWindowsWithAggregates.enabled auf false fest.

Unterstützung für die try_mod-Funktion hinzugefügt

Mit diesem Release wird Unterstützung für die PySpark try_mod()-Funktion hinzugefügt. Diese Funktion unterstützt die ANSI SQL-kompatible Berechnung des ganzzahligen Rests der Division zweier numerischer Werte. Wenn das Divisor-Argument 0 ist, gibt die try_mod()-Funktion null zurück, anstatt eine Ausnahme auszulösen. Sie können die try_mod()-Funktion anstelle von mod oder % verwenden, die eine Ausnahme auslösen, wenn das Divisor-Argument 0 und ANSI SQL aktiviert ist.

Aktualisierungen der Benutzeroberfläche

SQL-Editor:

Der Inlineassistent ist jetzt im SQL-Editor verfügbar. Klicken Sie im Editorfeld auf das Symbol „Assistent“, um die Eingabe umzuschalten. Geben Sie eine Frage oder einen Kommentar auf Englisch ein und drücken Sie dann die EINGABETASTE (nicht UMSCHALT+EINGABETASTE, die eine Abfrage ausführt), um eine Antwort mit einer anderen Ansicht direkt im Editor zu erstellen.

Plattform:

Eine API für Benachrichtigungsziele ist jetzt verfügbar. Sie können Webhook- und E-Mail-Ziele jetzt programmgesteuert für Ihre Warnungen und Auftragsausführungsbenachrichtigungen verwalten. Siehe Benachrichtigungsziele.

4. Juli 2024

Databricks SQL-Version 2024.30 verfügbar

Rolloutzeitplan: Rollout der Vorschauversion für 2024.30: Zwischen dem 9. Juli und dem 15. Juli

Änderungen in Version 2024.30

Lakehouse Federation ist allgemein verfügbar (Generally Available, GA)

Lakehouse Federation-Connectors sind jetzt für die folgenden Datenbanktypen allgemein verfügbar (GA):

  • MySQL
  • PostgreSQL
  • Amazon Redshift
  • Snowflake
  • Microsoft SQL Server
  • Azure Synapse (SQL Data Warehouse)
  • Databricks

In diesem Release werden auch die folgenden Verbesserungen eingeführt:

  • Unterstützung der SSO-Authentifizierung (Single Sign-On) in den Snowflake- und Microsoft SQL Server-Connectors.

  • Azure Private Link-Unterstützung im SQL Server-Connector aus serverlosen Computeumgebungen. Weitere Informationen finden Sie unter Schritt 3: Erstellen von Regeln für den privaten Endpunkt.

  • Unterstützung für zusätzliche Pushdowns (Zeichenfolgenfunktionen, mathematische Funktionen, verschiedene Funktionen).

  • Verbesserte Pushdown-Erfolgsrate für verschiedene Abfrageformen.

  • Zusätzliche Pushdown-Debuggingfunktionen:

    • Die Ausgabe EXPLAIN FORMATTED zeigt den Abfragetext an, für den ein Pushdown ausgeführt wurde.
    • Die Benutzeroberfläche des Abfrageprofils zeigt den Abfragetext, für den ein Pushdown ausgeführt wurde, Verbundknoten-IDs und Ausführungszeiten von JDBC-Abfragen (im ausführlichen Modus) an. Siehe Anzeigen der vom System generierten Verbundabfragen.

DESCRIBE HISTORY zeigt jetzt Clustering-Spalten für Tabellen an, die Liquid Clustering verwenden

Wenn Sie eine DESCRIBE HISTORY-Abfrage ausführen, zeigt die Spalte operationParameters standardmäßig ein Feld clusterBy für CREATE OR REPLACE- und OPTIMIZE-Vorgänge an. Bei einer Delta-Tabelle, die Liquid Clustering verwendet, wird das Feld clusterBy mit den Clustering-Spalten der Tabelle aufgefüllt. Wenn die Tabelle kein Liquid Clustering verwendet, ist das Feld leer.

Unterstützung für Primär- und Fremdschlüssel ist allgemein verfügbar.

Die Unterstützung für Primär- und Fremdschlüssel in Databricks Runtime ist allgemein verfügbar. Das GA-Release enthält die folgenden Änderungen an den Berechtigungen, die für das Verwenden von Primär- und Fremdschlüsseln erforderlich sind:

  • Zum Definieren eines Fremdschlüssels benötigen Sie die SELECT-Berechtigung für die Tabelle mit dem Primärschlüssel, auf den der Fremdschlüssel verweist. Sie müssen die Tabelle mit dem Primärschlüssel nicht besitzen, was zuvor erforderlich war.
  • Das Ablegen eines Primärschlüssels mithilfe der CASCADE-Klausel erfordert keine Berechtigungen für die Tabellen, die Fremdschlüssel definieren, welche wiederum auf den Primärschlüssel verweisen. Zuvor mussten Sie die Tabellen besitzen, auf die verwiesen wird.
  • Das Ablegen einer Tabelle mit Einschränkungen erfordert jetzt dieselben Berechtigungen wie das Ablegen von Tabellen ohne Einschränkungen.

Informationen zum Verwenden von Primär- und Fremdschlüsseln mit Tabellen oder Ansichten finden Sie unter CONSTRAINT-Klausel, ADD CONSTRAINT-Klausel und DROP CONSTRAINT-Klausel.

Liquid Clustering erreicht allgemeine Verfügbarkeit (GA)

Die Unterstützung für Liquid Clustering ist in Databricks Runtime 15.2 und höher jetzt allgemein verfügbar. Weitere Informationen finden Sie unter Verwenden von Liquid Clustering für Delta-Tabellen.

Typerweiterung in Public Preview

Sie können jetzt die Typerweiterung für Tabellen aktivieren, die Delta Lake nutzen. Tabellen mit aktivierter Typerweiterung ermöglichen das Ändern des Spaltentyps in einen allgemeineren Datentyp, ohne die zugrunde liegenden Datendateien neu zu schreiben. Weitere Informationen finden Sie unter Typerweiterung.

Schemaentwicklungsklausel zur SQL-Zusammenführungssyntax hinzugefügt

Sie können die WITH SCHEMA EVOLUTION-Klausel nun einer SQL-Zusammenführungsanweisung hinzufügen, um die Schemaentwicklung für den Vorgang zu aktivieren. Weitere Informationen finden Sie unter Schemaentwicklungssyntax für Merge.

Vakuuminventarunterstützung

Sie können jetzt einen Bestand an Dateien angeben, die beim Ausführen des VACUUM-Befehls in einer Delta-Tabelle berücksichtigt werden sollen. Siehe OSS Delta-Dokumente.

Unterstützung für die Zstandard-Komprimierungsfunktionen

Sie können nun die Funktionen zst_compress, zstd_decompress und try_zstd_decompress verwenden, um BINARY Daten zu komprimieren und zu dekomprimieren.

Abfragepläne in der SQL-Benutzeroberfläche werden jetzt korrekt angezeigt PhotonWriteStage

Wenn sie in der SQL-Benutzeroberfläche angezeigt wird, zeigten write-Befehle in Abfrageplänen fälschlicherweise PhotonWriteStage als Operator an. Mit dieser Version wird die Benutzeroberfläche aktualisiert, um PhotonWriteStage als Phase anzuzeigen. Dies ist nur eine Änderung der Benutzeroberfläche und wirkt sich nicht auf die Ausführung von Abfragen aus.

Aktualisierungen der Benutzeroberfläche

API-Unterstützung:

27. Juni 2024

Zeilenfilter und Spaltenmasken in sql materialisierten Ansichten und Streamingtabellen in Databricks sind öffentliche Vorschau

Zeilenfilter und Spaltenmasken in materialisierten SQL-Ansichten und Streamingtabellen in Databricks sind public Preview. Dieses Public-Preview-Release umfasst die folgenden Änderungen:

  • Sie können materialisierten Sichten oder Streamingtabellen in Databricks SQL Zeilenfilter und Spaltenmasken hinzufügen.

    • Sie können materialisierte Sichten oder Streamingtabellen in Databricks SQL für Tabellen definieren, die Zeilenfilter und Spaltenmasken enthalten.

    Weitere Informationen finden Sie unter CREATE MATERIALIZED VIEW und CREATE STREAMING TABLE.

Aktualisierungen der Benutzeroberfläche

Visualisierungen:

  • Die Interaktivität beim Anzeigen von QuickInfos, wenn Sie mit dem Mauscursor auf Kreis-, Punkt- und Wärmebilddiagrammen zeigen, wurde mit vielen Datenpunkten verbessert.

Katalog-Explorer:

  • Dank einer überarbeiteten Benutzeroberfläche des Katalog-Explorers können die zuletzt verwendeten Unity Catalog-Objekte über die Ansicht Schnellzugriff leichter gefunden und als Favorit festgelegt werden. Die Navigationsoberfläche wurde ebenfalls vereinfacht, sodass Sie Details zu Computeressourcen, dem Speicher, Anmeldeinformationen, Verbindungen, DBFS und der Verwaltung oben links im Bildschirm in den Symbol „Einstellungen“ Einstellungen erkunden können. Delta Sharing, Reinräume und externe Daten verfügen jetzt über dedizierte Seiten.

6. Juni 2024

Fix für materialisierte Sichten und Streamingtabellen in Datenbricks SQL

Das Problem, das dazu führte, dass ALTER SCHEDULE-Abfragen für materialisierte Ansichten und Streamingtabellen in Datenbricks SQL erst nach dem nächsten REFRESH-Vorgang wirksam werden, wurde behoben. Jetzt werden ALTER SCHEDULE-Abfragen sofort angewendet. Weitere Informationen finden Sie unter Planen der Aktualisierung materialisierter Sichten.

Materialisierte Sichten und Streamingtabellen in Databricks SQL sind Public Preview

Materialisierte Sichten und Streamingtabellen in Databricks SQL sind als Public Preview für alle Kundinnen und Kunden verfügbar. Dieser öffentliche Vorschauversion umfasst die folgenden Änderungen:

Aktualisierungen der Benutzeroberfläche

Dashboards:

  • Kontobenutzer und -benutzerinnen können jetzt Visualisierungsdaten aus veröffentlichten Dashboards herunterladen
  • Unveröffentlichte Dashboards können nun über das Dropdownmenü Entwurf/Veröffentlichen am oberen Rand eines Dashboards veröffentlicht werden.
  • Es wurde ein Problem behoben, bei dem Parameter namens limit nicht erkannt wurden.

Visualisierungen:

  • Verbessertes Rendern von Boxplots im dunklen Modus

Abfrageerkenntnisse:

  • Bei allen an SQL-Warehouses angefügten Notebooks können Sie auf das Abfrageprofil zugreifen, indem Sie unter der Zelle, die die Abfrage enthält, auf Leistung anzeigen klicken. Wenn die Zelle mehrere Abfragen enthält, wird für jede Anweisung ein Link zum Abfrageprofil bereitgestellt.

30. Mai 2024

Neue Berechtigungsstufe für SQL-Warehouses

Die Berechtigung Kann überwachen ermöglicht es Benutzern, SQL-Warehouses zu überwachen, einschließlich dem zugehörigen Abfrageverlauf und den Abfrageprofilen. Die Berechtigung Kann überwachen ist als Public Preview verfügbar. Siehe Vektorsuchendpunkt-ACLs.

Aktualisierungen der Benutzeroberfläche

Dashboardverbesserungen:

  • Ein Kebab-Menü wurde zu Dashboardgadgets zum Herunterladen von Bildern und Daten hinzugefügt.
  • Benutzer können Legacy-Dashboardparameter mit Abfrageunterstützung und Auswahllistenparameter in Dashboards migrieren.

23. Mai 2024

Aktualisierungen der Benutzeroberfläche

  • Sie können jetzt mehrere Elemente im Arbeitsbereich auswählen, um sie zu verschieben oder zu löschen. Wenn mehrere Objekte ausgewählt sind, wird eine Aktionsleiste angezeigt, die über Optionen zum Verschieben oder Löschen von Elementen verfügt. Zudem können Sie mehrere Elemente mit der Maus auswählen und an eine neue Position ziehen. Vorhandene Berechtigungen für Objekte gelten bei Massenverschiebungs- und Massenlöschvorgängen weiterhin.
  • Sie können jetzt Unity Catalog-Objekte als Favoriten im Catalog-Explorer und im Schemabrowser markieren. Dazu gehören Kataloge, Schemas, Tabellen, Modelle, Volumes und Funktionen. Unity Catalog-Ressourcen, die Sie als Favoriten markieren, sind auf der Azure Databricks-Homepage leicht zugänglich.

Dashboardupdates:

  • Kombinationsdiagramme mit zwei Achsen zeigen jetzt Balkenlegenden auf der rechten Achse und Linienlegenden entsprechend richtig an.
  • Diagramme mit doppelter Achse zeigen jetzt Beschriftungen auf Balken richtig an.

Aktualisierungen von Visualisierungen:

  • Die bedingten Formatbeschriftungen des Tabelleneditors für wenn und dann unterstützen jetzt den dunklen Modus.
  • Das redundante Link öffnen-Symbol wurde aus den QuickInfos des Tabellen-Editors entfernt.
  • Die Beschriftung der Standardschriftart im Tabellen-Editor wird jetzt automatisch ausgerichtet.

16. Mai 2024

Rolloutzeitplan

  • Vorschaurollout für Version 2024.25: abgeschlossen am 1. Mai
  • Aktueller Rollout für Version 2024.25: zwischen dem 14. Mai und dem 21. Mai

Hinweis

Ein Upgrade auf die Python-Bibliothek panda (Version 2.0.3) verursachte einen Breaking Change in Databricks SQL Version 2024.20. Azure Databricks hat Version 2024.20 nicht im Kanal mit der aktuellen Version bereitgestellt. Stattdessen erfolgte am 1. Mai 2024 im Vorschaukanal ein Upgrade auf Version 2024.25. Der Rollout im Kanal mit der aktuellen Version erfolgt direkt von Version 2024.15 auf Version 2024.25.

Änderungen in Version 2024.25

Datengovernance

Passthrough für Anmeldeinformationen und die Hive-Metastore-Tabellenzugriffssteuerung sind veraltet.

Passthrough für Anmeldeinformationen und die Hive-Metastore-Tabellenzugriffssteuerung sind Legacymodelle für Daten-Governance. Nehmen Sie ein Upgrade auf Unity Catalog vor, um die Sicherheit und Governance Ihrer Daten durch die Bereitstellung eines zentralen Ortes zum Verwalten und Überwachen des Datenzugriffs über mehrere Arbeitsbereiche in Ihrem Konto hinweg zu vereinfachen. Siehe Was ist Unity Catalog?.

Die Unterstützung für die Passthrough- und Hive-Metastore-Tabellenzugriffssteuerelemente für Anmeldeinformationen wird in einer bevorstehenden DBR-Version entfernt.

SQL-Sprachfeatures

Die Sternklausel (*) wird jetzt in der WHERE-Klausel unterstützt.

Sie können nun die Sternklausel (*) in der WHERE-Klausel verwenden, um auf alle Spalten aus der Liste SELECT zu verweisen. Beispiel: SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*).

Unterstützung für Cloudflare R2-Speicher, um regionsübergreifende Ausgangsgebühren zu vermeiden, seit Version 2024.15

Sie können Cloudflare R2 jetzt als Cloudspeicher für Daten verwenden, die in Unity Catalog registriert sind. Cloudflare R2 ist in erster Linie für Delta Sharing-Anwendungsfälle vorgesehen, in denen Sie die von Cloudanbietern berechneten Datenausgangsgebühren vermeiden möchten, wenn Daten regionsübergreifend übermittelt werden.

Cloudflare R2 Storage unterstützt alle Databricks-Daten und KI-Ressourcen, die in Azure Data Lake Storage Gen2 unterstützt werden.

Weitere Informationen finden Sie unter Verwenden von Cloudflare R2-Replikaten oder Migrieren von Speicher zu R2 und Erstellen von Speicheranmeldeinformationen zum Herstellen einer Verbindung mit Cloudflare R2.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Datenermittlungsupdates: Der Assistent für das Update vom Hive-Metastore zu Unity Catalog unterstützt Upgrades von verwalteten Hive-Metastore-Tabellen mit universellen Computeressourcen oder SQL-Warehouses. Durch das Aktualisieren von mehr als 20 Tabellen wird ein neues Notebook erstellt, das die Befehle SYNC und ALTER TABLE enthält, die die Konvertierung ausführen.

Dashboardupdates:

  • Zwei-Achsen-Funktionen jetzt für Flächen-, Balken-, Linien- und Punktdiagrammtypen verfügbar.
    • Wenn Sie ein Diagramm mit zwei Achsen aktivieren, werden Achsentitel und der Bereich nicht mehr auf die zweite Achse kopiert.
    • Das letzte in der Visualisierungskonfiguration angegebene Feld wird automatisch auf die rechte Y-Achse verschoben.

9. Mai 2024

Fehlerbehebungen für SQL-Editor:

  • Die Features für die Zwischenablagefunktionen der Ergebnistabelle gelten jetzt für die Neue Ergebnistabelle des SQL-Editors.

Dashboardverbesserungen:

  • Mit abfragebasierten Parametern können Autoren eine Liste von auswählbaren Werten definieren, die Viewer als Parameter für andere Visualisierungen auf einem Dashboard-Canvas verwenden können. Weitere Informationen finden Sie unter Verwenden von abfragebasierten Parametern.
  • Die Spaltenreihenfolge in Dateien, die von einem Tabellenwidget heruntergeladen werden, bleibt nun erhalten.
  • Der Tabellen-Editor enthält jetzt QuickInfos zum Daraufzeigen, die die Namen von Spalten anzeigen.
  • Wenn Sie von anderen Visualisierungstypen zu einem Histogramm wechseln, bleibt die Informationscodierung jetzt besser erhalten.

Dashboardkorrekturen:

  • Es wurde ein Problem behoben, bei dem ein einzelner Rasterhöhenfilter eine unnötige Überlaufscrollleiste angezeigt hat.
  • Es wurde ein Problem behoben, durch das falsch gerenderte Visualisierungen auf veröffentlichten Dashboards verursacht wurden, bei denen eine Referenzdatensatzspalte gelöscht wurde.

2. Mai 2024

Dashboardupdates:

  • Abfragen und Visualisierungen können jetzt aus dem SQL-Editor in ein neues Dashboard kopiert werden. Sie können weiterhin Visualisierungen zu älteren Dashboards aus dem SQL-Editor hinzufügen. Siehe Bearbeiten, Herunterladen oder Hinzufügen zu einem Dashboard.
  • Dashboards verwalten nun einen 24-Stunden-Ergebniscache, um die anfänglichen Ladezeiten zu optimieren. Siehe Optimierung und Zwischenspeicherung von Datensätzen.
  • Balkendiagramme mit kategorisierter X und quantitativer Y sind jetzt in den Antworten des Databricks-Assistenten sortiert.
  • Das Migrationsproblem mit dem alten Histogramm COUNT (*) wurde behoben, um eine genaue Migration sicherzustellen.
  • Die Möglichkeit zum Kombinieren numerischer Typen und Datumstypen in einem Filter-Widget wurde implementiert.
  • Beim Erstellen von Diagrammen schlägt der Databricks-Assistent während der Eingabe nun automatisch relevante Spalten vor.

Aktualisierungen der Visualisierung:

  • Die vom Benutzer ausgewählte Farbe für Tabellen bleibt nun im hellen und dunklen Modus in älteren Diagrammen erhalten.
  • Die Datenkürzungslogik wurde verbessert, um die Leistung in Kombinations-, Kreis-, Diagrammen und Histogrammen zu verbessern.
  • Ein Teilstrich wird jetzt immer oben auf einer quantitativen Achse für einfache Diagramme angezeigt.

April 23, 2024

Benutzeroberflächen-Updates:

  • In allen Dialogfeldern Freigeben in der Benutzeroberfläche wurde die Gruppe All Users in All Workspace Users umbenannt. Der neue Name spiegelt den Umfang der Gruppe besser wider, die schon immer die dem Arbeitsbereich zugewiesenen Benutzer und Benutzerinnen umfasste. Die Gruppenmitgliedschaft wird im Rahmen dieser Umbenennung nicht verändert.

Dashboardverbesserungen:

  • Beim Start des SQL-Warehouse eines Dashboards wird ein Dialogfeld angezeigt, in dem die Wartezeit erläutert wird.
  • Die Bildlaufposition wird beim Wechseln zwischen den Registerkarten Canvas undDaten beibehalten.
  • Das Klonen eines Legacy-Dashboards zum Erstellen eines Lakeview-Dashboards unterstützt nun einige Parameterkonvertierungen. Weitere Informationen finden Sie unter Anpassen von Legacyparametern.
  • Relative Datumsangaben wie Heute,Morgen und Vor7 Tagen werden jetzt bei Datums- und Datumszeitparametern unterstützt.
  • Schieberegler für Zahlenbereiche können einem Dashboard als Filter hinzugefügt werden.
  • Histogramme können jetzt disaggregierte Daten anzeigen.
  • Punktwolken unterstützen jetzt eine Größencodierung.

Dashboardkorrekturen:

  • Die zeitliche Farbcodierung kann Farbzuweisungen jetzt richtig ändern.

Aktualisierungen der Visualisierung:

  • Benutzerdefinierte QuickInfo-Formate funktionieren jetzt in Diagrammen mit mehreren Achsen ordnungsgemäß.
  • Das Vorschautag Neue Diagramme wird entfernt, wenn Benutzer oder Benutzerinnen die Umschaltfläche in den letzten 14 Tagen nicht geändert haben.

18. April 2024

Lakeview-Dashboards allgemein verfügbar

Lakeview-Dashboards sind jetzt das standardmäßige Dashboard-Tool. Sie wurden auf der Benutzeroberfläche in Dashboards umbenannt. Databricks SQL-Dashboards werden jetzt als Legacy-Dashboards bezeichnet. Die Namen der zugehörigen API-Tools wurden nicht geändert.

  • Dashboardverbesserungen:
    • Überwachungsprotokolle sind für Lakeview-Dashboards verfügbar. Weitere Informationen finden Sie unter Dashboardereignisse.
    • Bei Daten, die aus Dashboards heruntergeladen werden, werden angewendete Parameter berücksichtigt.
    • Der Databricks-Assistent ist auf der Registerkarte Daten aktiviert, ohne dass zuerst Datasets hinzugefügt werden müssen.
    • Gestapelte Balkendiagramme mit mehreren Y-Feldern können die Sortierung der X-Achse basierend auf der Summe der Y-Achsenwerte unterstützen.
    • In Visualisierungsachsenmenüs kann zwischen Skalierungsfunktionen vom Typ Linear und Log (symmetrisch) umgeschaltet werden.
    • Das Filterwidget ist jetzt standardmäßig kompakter.
    • Die anfängliche Ladezeit für das Texteingabe-Filterwidget wurde reduziert.
    • Verbesserte automatische Diagrammkonvertierungen beim Migrieren von Legacy-Dashboards.
  • Dashboardkorrekturen:
    • Die Warnung zu eingeschränkten Anzeigeeinstellungen wird nicht angezeigt, wenn das Dashboard für andere Personen freigegeben wurde.
    • Die Fehlermeldungen im SQL-Editor auf der Registerkarte Daten unterstützen jetzt den dunklen Modus.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Verbesserungen:

  • Die QuickInfos in gestapelten Diagrammen zeigen nun standardmäßig den Stapelwert und den Prozentsatz an.
  • Die QuickInfos für Diagramme mit mehreren Achsen heben nun das Element hervor, auf das gezeigt wird.
  • Visualisierungen vom Typ Tabelle für Databricks SQL passen nun bei der Bearbeitung im SQL-Editor den Datentyp eines neuen Abfrageergebnisses an.
  • Die Tabelle Abfrageverlauf des Katalog-Explorers enthält eine baumähnliche Ansicht für die Attribution Abfragequelle. Dadurch können Sie sehen, welche Entitäten die Ausführung der Abfrageanweisung ausgelöst haben.

11. April 2024

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Verbesserungen:

  • Bei der Erstellung von Visualisierungen in Databricks SQL und Notebooks ist jetzt eine Gruppierung nach Prozent möglich.
  • Bei neuen Diagrammen (Public Preview) können Sie entlang einer einzelnen Achse vergrößern, indem Sie bei gedrückt gehaltener Maustaste eine gerade Linie parallel zur Achse ziehen.
  • Die Benutzeroberfläche für die Positivliste des freigegebenen Unity Catalog-Clusters ist jetzt allgemein verfügbar. Sie können darauf über die Metastore-Detailseite im Katalog-Explorer zugreifen. Weitere Informationen finden Sie unter Hinzufügen von Elementen zur Positivliste.
  • Formulare zum Erstellen und Bearbeiten externer Speicherorte werden jetzt als ganze Seite geöffnet. Sie enthalten die Option zum Einschließen von Speicheranmeldeinformationen.

Fehlerbehebungen:

  • Es wurde ein Problem für Histogramme behoben, das dazu führte, dass negative Werte fälschlicherweise als positiv markiert wurden.

4. April 2024

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Verbesserungen:

  • Verbesserungen an Histogrammen auf Lakeview-Dashboards.

    • Unterstützung von Bezeichnungen hinzugefügt.
    • Intervalleinstellungen werden jetzt beim Wechsel zwischen verschiedenen Feldern beibehalten.
  • Der Beispielkatalog auf der Dashboardlistenseite erstellt jetzt Lakeview-Dashboards. Weitere Informationen finden Sie unter Tutorial: Verwenden von Beispieldashboards.

  • Wenn auf einem Lakeview-Dashboard mit der rechten Maustaste auf den Rahmen eines Widgets geklickt wird, öffnet sich ein Kontextmenü.

  • Die linke Navigationsleiste wird für Arbeitsbereichsbenutzer beibehalten, die veröffentlichte Lakeview-Dashboards anzeigen.

  • Ausgewählte Filteroptionen werden beim Navigieren zwischen veröffentlichten Lakeview-Dashboards und Lakeview-Entwurfsdashboards beibehalten.

  • Spaltennamen können nun in den SQL-Editor eingefügt werden, wenn eine Abfrage auf der Registerkarte Daten eines Lakeview-Dashboards bearbeitet wird.

  • Wenn ein Lakeview-Dashboard ersetzt wird, bleibt der vorhandene Dashboardname erhalten, und die Inhalte werden ersetzt.

  • Beim Wechsel von Visualisierungen zwischen Wärmebildern und anderen Diagrammtypen bleiben die relevanten Felder jetzt besser erhalten.

Fehlerbehebungen:

  • Bei Balkendiagrammen mit Farbcodierungen wird jetzt das Hinzufügen mehrerer Y-Achsenfelder ordnungsgemäß eingeschränkt.
  • Es wurde ein Problem behoben, das dazu führte, dass die Schaltfläche Als PNG herunterladen bei einigen Visualisierungen fehlte.
  • Die Formatierung negativer großer ganzer Zahlen wurde behoben, bei denen bisher das Tausendertrennzeichen fehlte.
  • Die falsche Platzierung der Linie beim Daraufzeigen auf Bezeichnungen in Liniendiagrammen wurde behoben.

28. März 2024

Databricks SQL-Version 2024.15 verfügbar

Rolloutzeitplan

  • Vorschaurollout für 2024.15: Zwischen 14. Februar und 4. März
  • Aktueller Rollout für Version 2024.15: Zwischen 25. März und dem 8. April

Änderungen in Version 2024.15

Deltaupdates

  • Delta UniForm jetzt allgemein verfügbar: UniForm ist jetzt allgemein verfügbar und verwendet das IcebergCompatV2-Tabellenfeature. Sie können UniForm jetzt für vorhandene Tabellen aktivieren oder aktualisieren. Weitere Informationen finden Sie unter Verwenden von UniForm zum Lesen von Deltatabellen mit Iceberg-Clients.
  • Neuberechnen von Statistiken mit Überspringen von Daten für Delta-Tabellen: Sie können Statistiken, die im Delta-Protokoll gespeichert sind, jetzt neu berechnen, nachdem Sie zum Überspringen von Daten verwendete Spalten geändert haben. Weitere Informationen finden Sie unter Angeben von Delta-Statistikspalten.

Updates für die SQL-Programmiersprache

  • Deklarieren temporärer Variablen in einer SQL-Sitzung: Mit dieser Version wird die Möglichkeit eingeführt, temporäre Variablen in einer Sitzung zu deklarieren, die dann in Abfragen festgelegt und referenziert werden können. Siehe Variablen.
  • Unterstützung nativer XML-Dateiformate (Public Preview): Die Unterstützung nativer XML-Dateiformate befindet sich jetzt in der Public Preview-Phase. Die XML-Dateiformatunterstützung ermöglicht das Aufnehmen, Abfragen und Analysieren von XML-Daten für die Batchverarbeitung oder das Streaming. Sie kann Schema- und Datentypen automatisch ableiten und entwickeln, SQL-Ausdrücke wie from_xml unterstützen und XML-Dokumente generieren. Sie erfordert keine externen Jars und arbeitet nahtlos mit Auto Loader, read_files, COPY INTO und Delta Live Tables. Weitere Informationen unter Lesen und Schreiben von XML-Dateien.

SQL-Updates für Apache Spark

Databricks SQL 2024.15 beinhaltet Apache Spark 3.5.0. Weitere Fehlerkorrekturen und Verbesserungen für SQL sind in den Versionshinweisen zu Databricks Runtime 14.3 aufgeführt. Eine vollständige Liste finden Sie bei Apache Spark unter dem Tag [SQL].

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

  • Eine neue Übersichtsregisterkarte auf der Entitätsseite des Katalog-Explorers enthält wichtige Metadaten wie Dateigröße, Datenquelle, Besitzer, Tabellenschema und Kommentare.

  • Updates für Lakeview-Dashboards:

    • Lakeview-Dashboards unterstützen jetzt Parameter. Ersteller können über die Registerkarte Daten Parameter für Datasetabfragen hinzufügen und dann mithilfe von Einzelwertselektoren und Datumsauswahloptionen Parameter auf der Canvas festlegen. Siehe Arbeiten mit Dashboardparametern.
    • Lakeview-Dashboards werden jetzt in der API für Arbeitsbereichsberechtigungen unterstützt. Weitere Informationen finden Sie in der REST-API-Referenz unter PATCH /api/workspace/workspace/updatepermissions.
    • Steuerungswidgets auf der Canvas wurden in Filterwidgets umbenannt.
    • In Kombinationsdiagrammen sind auf der X-Achse keine disaggregierten Felder mehr zulässig.
    • Die Schaltfläche Link kopieren im Freigabedialogfeld schließt jetzt Parameter ein, die in der URL gespeichert sind.
    • Widgets auf veröffentlichten Dashboards zeigen beim Daraufzeigen keine Rahmen mehr an.
    • Ein Problem wurde behoben, das dazu führte, dass die Schaltflächen „Databricks-Assistent“ und „PNG herunterladen“ mit visuellen Diagrammen überlappen.
  • Beim Wechsel von Visualisierungen zwischen Wärmebildern und anderen Diagrammtypen bleiben die relevanten Felder jetzt besser erhalten.

  • Bei Balkendiagrammen mit Farbcodierungen wird jetzt das Hinzufügen mehrerer Y-Achsenfelder ordnungsgemäß eingeschränkt.

21. März 2024

  • Die Unity Catalog-Modellherkunft befindet sich jetzt in der Public Preview-Phase.

Die Tabellenansicht im Katalog-Explorer verfügt jetzt über eine Registerkarte namens Übersicht, auf der die primären Metadaten beschrieben werden.

  • SQL-Warehouses für Notebooks sind jetzt allgemein verfügbar und ermöglichen es Ihnen, die Vorteile vollständig verwalteter, sofort verfügbarer und skalierbarer Computeressourcen für Ihre SQL-Workloads in der umfangreichen Umgebung für die gemeinsame Dokumenterstellung eines Notebooks zu nutzen. Weitere Informationen finden Sie unter Verwenden eines Notebooks mit einem SQL-Warehouse.

Für Lakeview-Dashboards gibt es folgende Korrekturen und Verbesserungen:

  • Erweiterte API-Unterstützung für Lakeview ermöglicht nun auch das Erstellen, Abrufen, Aktualisieren und Entfernen von Dashboards. Weitere Informationen finden Sie in der REST-API-Referenz unter Lakeview.
  • Es wurde eine Aktualisierungsschaltfläche Katalogbrowser auf der Registerkarte Daten hinzugefügt.
  • Lakeview-Dashboards werden jetzt auf der Seitenleiste des Arbeitsbereichs im Menü Neu vor Dashboards angezeigt. Auf der Seite mit der Dashboardliste wird die Registerkarte Lakeview-Dashboards links neben der Registerkarte Dashboards angezeigt.
  • Der Databricks-Assistent für Lakeview wurde mit einem Eingabefeld sowie mit Vorschlägen aktualisiert, um die Auffindbarkeit zu verbessern und Benutzern dabei zu helfen, die verwendbaren Prompts zu verstehen.
  • Lakeview-Visualisierungen unterstützen jetzt Median-Aggregationen.
  • Die Farbauswahl im Visualisierungs-Editor für Lakeview-Dashboards wurde aktualisiert, um die Umgebung für die Erstellung von Tabellen zu optimieren.
  • Die Kreisdiagrammmigration wurde verbessert und unterstützt nur noch Szenarien mit Winkel- oder Farbdefinitionen.
  • Ein Fehler wurde behoben, der die Gruppierung nach Diagrammen mit dem Namen Anzahl verhindert hat. Diagramme können jetzt nach Feldern mit dem Namen Anzahl gruppiert werden.
  • Bei Balkendiagrammen werden die Layoutsteuerelemente für Gruppe und Stapel jetzt ausgeblendet, wenn sie für die vom Benutzer ausgewählte Konfiguration nicht anwendbar sind.

14. März 2024

Für Lakeview Dashboards gilt:

  • Histogramme unterstützen jetzt benutzerdefinierte kategorische Farben.

    • Wärmebilder unterstützen jetzt quantitative Staffelungen.
    • Titel und Beschreibungen werden beim Wechsel zwischen Visualisierungstypen, einschließlich Kombinationsdiagrammen, beibehalten.
    • Sie können jetzt das zugrunde liegende Dataset, das einem Entwurfsdashboardgadget zugeordnet ist, öffnen, indem Sie mit der rechten Maustaste darauf klicken. Das Dataset wird auf der Registerkarte Daten geöffnet.
  • In neuen Diagrammen werden nun Aliase und benutzerdefinierte Farben für Nullwerte in numerischen Spalten angewendet.

  • In neuen Diagrammen werden jetzt Teilstriche gerendert, um den oberen Rand der Y-Achse anzuzeigen.

7. März 2024

  • Beim Anzeigen einer Tabelle im Katalog-Explorer enthält die Schaltfläche "Erstellen " eine Option zum Erstellen eines Lakeview-Dashboards anstelle eines Databricks SQL-Dashboards.

  • Histogramme sind jetzt für Lakeview-Dashboards verfügbar. Histogramme werden häufig verwendet, um die Verteilung eines numerischen Felds zu visualisieren.

  • Beim Klonen eines Databricks SQL-Dashboards zum Erstellen eines Lakeview-Dashboards werden jetzt Probleme bei der Konvertierung von Datasets als Fehler im neuen Widget im Lakeview-Dashboard angezeigt.

  • Farbverläufe sind jetzt verfügbar, wenn ein numerisches Feld für eine Visualisierung in einem Lakeview-Dashboard verwendet wird.

  • Farbverläufe werden jetzt im Lakeview-Dashboardvisualisierungs-Editor verfügbar gemacht, wenn ein Color by field angegeben wird.

  • Der Titel und die Beschreibung, die einer Visualisierung zugeordnet ist, werden nicht mehr bearbeitet, wenn der Viewer keine Bearbeitungsberechtigungen für ein Lakeview-Entwurfsdashboard besitzt.

  • Es wurde ein Problem behoben, bei dem QuickInfos in Diagrammen mit mehr als 100 Datenreihen nicht ordnungsgemäß alle Datenreihen angezeigt wurden. Jetzt wird nur die fokussierte Datenreihe angezeigt.

  • Verringerte Eingabelatenz im SQL-Editor um 30 % durch Leistungsoptimierungen.

  • Beim Verwalten von Abfragen im SQL-Editor wird beim Verschieben einer Abfrage in den Papierkorb automatisch die Registerkarte geschlossen.

  • Es wurde ein Problem im SQL-Editor behoben, bei dem Text beim Anpassen der Seitenbereichsbreite versehentlich ausgewählt wurde.

Donnerstag, 29. Februar 2024

  • Der Schemabrowser im Katalog-Explorer zeigt jetzt Spalteneinschränkungen für Primär- und Fremdschlüssel an.

  • Die Aufbewahrungszeit, die auf der Registerkarte „Herkunft“ im Katalog-Explorer angezeigt wird, wurde auf ein Jahr erhöht.

  • QuickInfos für neue Diagramme in Notebooks werden jetzt immer innerhalb der Visualisierungsgrenze gerendert.

  • Erfahren Sie, wie Sie Lakeview-Dashboards programmgesteuert mithilfe der REST-API verwalten. Weitere Informationen unter Verwalten von Dashboards mit Arbeitsbereichs-APIs.

  • Lakeview-Dashboards unterstützen jetzt Histogramme.

  • Verbesserte Freigabe und Veröffentlichung in Lakeview-Dashboards:

    • Verbesserte Dialogfelder zum Freigeben und Veröffentlichen, sodass die sichere und einfache Freigabe an jeden Kontobenutzer möglich ist.
    • Im Arbeitsbereichsbrowser geöffnete Dashboards zeigen das veröffentlichte Dashboard an, wenn es vorhanden ist. Viewer können jetzt auch Details zur neuesten veröffentlichten Version anzeigen, einschließlich Herausgeber, Uhrzeit und Anmeldeinformationen.
    • Editoren können mit einem neuen Dropdown-Umschalter in der Lakeview Dashboard-Benutzeroberfläche schnell zwischen Entwürfen und veröffentlichten Versionen wechseln.

22. Februar 2024

  • Verbesserungen an der Registerkarte Beispieldaten in der Tabellenansicht des Katalog-Explorers ermöglichen ihnen das Sortieren von Spalten, das Kopieren ausgewählter Daten in die Zwischenablage und das Anzeigen von Zeilennummern. Es können jetzt besser spezielle Werte angezeigt werden, z. B. JSON-Objekte, Datumswerte, numerische und Nullwerte.

  • Lakeview-Dashboards unterstützen jetzt das Senden regelmäßiger PDF-Momentaufnahmen des Dashboards an Arbeitsbereichsbenutzer und Benachrichtigungsziele. Siehe Zeitpläne und Abonnements.

  • Die Liste der Visualisierungsoptionen in der Lakeview-Dropdownauswahl wird nun alphabetisch sortiert.

  • Beim Kopieren von Databricks SQL-Dashboards in Lakeview-Dashboards zeigen Widgets, die nicht konvertiert werden können, jetzt die Visualisierungskonfigurationsauswahl anstelle einer Fehlermeldung an.

15. Februar 2024

  • Die Dokumentation für codebasierte Abfragefilter (z. B. SELECT action AS 'action::filter') wurde entfernt. Databricks empfiehlt, Abfragen zu aktualisieren, um dieses Muster zu entfernen.

  • Auf Lakeview-Dashboards zeigen Kreisdiagramme jetzt Segmente gleicher Größe an, wenn kein Winkelfeld angegeben wird.

  • Lakeview unterstützt jetzt Kombinationsdiagramme, die Balken- und Liniendiagramme kombinieren, um zwei verschiedene Werte im gleichen Diagramm anzuzeigen.

  • Wärmebilder, die Farbintensität verwenden, um die Größenordnung der Korrelation zwischen zwei einzelnen Variablen darzustellen, sind jetzt in Lakeview verfügbar.

8. Februar 2024

  • Sie können jetzt Zugriff anfordern, wenn Sie einen Link zu einem Lakeview-Dashboard öffnen, für das Sie keine Berechtigungen besitzen.
  • Lakeview-Dashboardfilter verfügen jetzt über explizite Optionen vom Typ Alle und Keine. Ersteller können die Option Alle in einzelnen ausgewählten Filtern ausblenden.
  • Sie können jetzt Mindest- und Höchstwerte für Achsen in Lakeview-Dashboarddiagrammen festlegen.

1. Februar 2024

Databricks SQL-Version 2024.10 verfügbar

Rolloutzeitplan

  • Vorschaurollout für Version 2024.10: Zwischen dem 30. Januar 2024 und dem 5. Februar 2024
  • Aktueller Rollout für Version 2024.10: Zwischen dem 13. Februar 2023 und dem 20. Februar 2024

Änderungen in Version 2024.10

  • Behandlung beschädigter Dateien in DML-Befehlen korrigiert: Die DML-Befehle DELETE, UPDATE und MERGE INTO berücksichtigen die Leseoptionen ignoreCorruptFiles und ignoreMissingFiles nicht mehr. Bei einer nicht lesbaren Datei in einer Tabelle schlagen diese Befehle jetzt fehl, auch wenn diese Optionen angegeben sind.
  • Parallelität auf Zeilenebene ist allgemein verfügbar und standardmäßig aktiviert: Parallelität auf Zeilenebene reduziert Konflikte zwischen gleichzeitigen Schreibvorgängen, indem Änderungen auf Zeilenebene erkannt werden. Parallelität auf Zeilenebene wird nur für Tabellen ohne Partitionierung unterstützt, darunter Tabellen mit Liquid Clustering. Die Parallelität auf Zeilenebene ist in Delta-Tabellen mit aktivierten Löschvektoren standardmäßig aktiviert. Weitere Informationen finden Sie unter Schreibkonflikte mit Parallelität auf Zeilenebene.
  • Flacher Klon für externe Unity Catalog-Tabellen (Public Preview): Sie können jetzt einen flachen Klon mit externen Unity Catalog-Tabellen verwenden. Weitere Informationen finden Sie unter Flacher Klon für Unity Catalog-Tabellen.
  • Schnellere Multithread-Statistiksammlung: Die Statistiksammlung ist in kleinen Clustern bis zu zehnmal schneller, wenn CONVERT TO DELTA ausgeführt wird oder Iceberg- und Parquet-Tabellen als Grundlage für das Klonen verwendet werden. Weitere Informationen finden Sie unter Konvertieren in Delta Lake sowie unter Inkrementelles Klonen von Parquet- und Iceberg-Tabellen zu Delta Lake.
  • Pushdownfilter in DeltaSource für Delta-Dateien: Für eine bessere Auslastung werden Partitionsfilter für Streamingabfragen von Delta-Tabellen jetzt vor dem Einschränken der Rate nach Delta verschoben.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

  • Die Registerkarte Administratoransicht auf Listenseiten für Databricks SQL-Objekte (Abfragen, Dashboards und Warnungen) wurde entfernt. Arbeitsbereichsadministratorbenutzer können alle Objekte auf ihren jeweiligen Listenseiten anzeigen. Weitere Informationen finden Sie unter Zugreifen auf und Verwalten von gespeicherten Abfragen, unter Legacy-Dashboards und unter Was sind Databricks SQL-Warnungen?.

  • Auf der Seite mit dem Abfrageverlauf werden standardmäßig Abfragen der letzten 24 Stunden angezeigt. Weitere Informationen finden Sie unter Abfrageverlauf.

  • Der Dashboardbenutzeroberfläche von Databricks SQL wurde die Menüoption In Lakeview-Dashboard klonen hinzugefügt. Mit diesem Tool können Sie ein neues Lakeview-Dashboard erstellen, das die gleichen Abfragen und Visualisierungen enthält wie Ihre bereits vorhandenen Databricks SQL-Dashboards. Siehe Klonen eines Legacy-Dashboards zu einem KI-/BI-Dashboard.

  • Balkendiagramme in Lakeview-Dashboards unterstützen das Stapeln von Balken für eine Normalisierung auf 100 Prozent.

  • Es wurde ein Problem behoben, bei dem das Vergrößern in einem veröffentlichten Lakeview-Dashboard zu einer Fokussierung auf falsche Zoomintervalle geführt hat.

24. Januar 2024

  • Die Canvas des Lakeview-Dashboards passt die Widgetplatzierung automatisch an, um möglichst leeren vertikalen Leerraum zwischen Zeilen zu entfernen.
  • Reduzierter Leerraum zwischen Titel und Beschreibungstext in Lakeview-Dashboardvisualisierungen.

18. Januar 2024

  • Ein Renderingproblem für Visualisierungen wurde behoben, bei dem Balkendiagramme, die ein einzelnes Datum auf der X-Achse anzeigten, zu einem sehr dünnen Balken führten. Neue Diagrammvisualisierungen werden wie erwartet gerendert.

  • Die Lakeview-Dashboardlistenseite zeigt Ihre Dashboards standardmäßig an. Sie können Filter auf dieser Seite verwenden, um auf Lakeview-Dashboards zuzugreifen, die anderen Arbeitsbereichsbenutzer*innen gehören.

11. Januar 2024

  • Databricks-SQL-Abfragen und Dashboard-APIs unterstützen das programmgesteuerte Ändern der Rolleneinstellung Ausführen als.

  • Lakeview unterstützt das Exportieren und Importieren von Dashboards als Dateien, um die Reproduktion von Entwurfsdashboards Arbeitsbereich-übergreifend zu erleichtern. Weitere Informationen finden Sie unter Exportieren, Importieren oder Ersetzen eines Dashboards.

4. Januar 2024

21. Dezember 2023

  • Der Lakeview Counter-Visualisierungstyp zeigt Farben beim Vergleichen von BigIntWerten in den Hauptfeldern Wert und Ziel an.

  • Die QuickInfos, die beim Umschalten der Spaltensicht in Tabellen in Lakeview angezeigt werden, wurden verbessert. Sie verhalten sich erwartungsgemäß und bleiben nicht erhalten.

  • Benutzer können nun den Databricks-Assistenten verwenden, um Visualisierungen in Lakeview zu erstellen. Weitere Informationen finden Sie unter Erstellen von Visualisierungen mit dem Databricks-Assistenten.

  • Bei neuen Diagrammen wird bei Wärmebild-Diagrammen die Einstellung reverseY beachtet.

  • Ein Problem mit der Renderingleistung für Notebooks mit einer großen Anzahl von Visualisierungen wurde behoben.

14. Dezember 2023

  • Es wurde ein Fehler behoben, bei dem Lakeview-Dashboards ohne manuelle Aktualisierung der Seite nicht in der Lakeview-Liste angezeigt wurden.
  • Verwenden Sie die Escape-Taste, um die Erstellung eines Lakeview-Widgets abzubrechen, wenn Sie es auf dem Canvas-Panel platzieren.
  • Im Katalog-Explorer werden jetzt Vektorsuchindizes in der Benutzeroberfläche als Teil der öffentlichen Vorschauversion der Databricks-Vektorsuche angezeigt.

7. Dezember 2023

Aktualisierungen der Benutzeroberfläche

  • Lakeview-Dashboards können für den schnellen Zugriff zu Favoriten hinzugefügt werden.

  • Tastenkombinationen zum Kopieren und Einfügen werden beim Entwerfen eines Lakeview-Dashboards unterstützt. Außerdem entfernt der Schlüssel „Löschen“ ausgewählte Widgets.

  • Erweiterte Lakeview-Widgettitel und -beschreibungen, um zu verhindern, dass Text während des Ladens abgeschnitten wird.

  • Ein Problem beim Formatieren von Visualisierungen wurde behoben, bei dem große ganzzahlige Werte versehentlich als Gleitkommas angezeigt wurden.

  • Ein Problem mit Databricks SQL-Dashboards wurde behoben, bei dem erweiterte Diagrammansichten manchmal leere Diagramme anzeigten.

  • Balkendiagramme mit quantitativen Feldern auf den X- und Y-Achsen rendern lesbarere Datenbeschriftungen.

  • Ein Problem im SQL-Editor wurde behoben, sodass Tabellen mit dem Wort „stream“ im Titel nicht länger mit dem reservierten Schlüsselwort in Konflikt steht. Diese Tabellen werden nun im Schemabrowser wie erwartet angezeigt und sind nicht fehlerhaft.

  • Die Abfrageverlaufsseite unterstützt jetzt Spaltenänderung und Spaltenauswahl.

  • Die Abfrageverlaufsseite unterstützt zwei neue Spalten: Abfragequelle und Abfragequelltyp.

  • BI-Optionen wie Tableau und Power BI sind einfacher im Katalog-Explorer auf berechtigten Seiten zu finden.

30. November 2023

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

  • In Kreisdiagrammen in Lakeview sind jetzt angepasste Farbzuweisungen möglich.

  • Visualisierungstransformationen in Lakeview werden jetzt beim Wechseln zwischen kompatiblen Feldtypen beibehalten.

  • Titeleinstellungen für Kanäle der Lakeview-Kreisdiagrammwinkel hinzugefügt.

  • Das Dropdownmenü für Lakeview-Datasets kann jetzt zur einfacheren Navigation durchsucht werden.

  • Lakeview unterstützt die vollständige numerische Anzeige für Werte unter 10.000, wodurch Abkürzungen vermieden werden.

  • Funktion zum farbigen Codieren von Datumskategoriefeldern in Lakeview hinzugefügt.

  • Lakeview-Benutzer*innen können jetzt Diagrammlegenden mit ihrem Cursor hervorheben, um die Werte zu kopieren und einzufügen.

  • Kreisdiagramme in Lakeview enthalten jetzt eine Option zum Umschalten von Bezeichnungen.

  • Für alle Lakeview-Visualisierungen wurde Blau als Standardfarbe festgelegt.

  • Lakeview-Spaltensymbole in Transformationen stimmen jetzt konsistent mit der verwendeten Transformationsmethode überein.

  • Steuerelemente im Lakeview-Bearbeitungsbereich werden jetzt automatisch umgebrochen, um die Lesbarkeit zu verbessern.

  • Ein erweiterter Farb-Editor für Lakeview-Visualisierungen wurde veröffentlicht.

  • Das Steuerelement für Tabellenschriftartbedingungen in Lakeview wird nun umgebrochen, um die Lesbarkeit zu verbessern.

  • Verbesserte Kompatibilität des dunklen Modus für Bezeichnungen in neuen Diagrammen.

  • Neue Diagramme priorisieren jetzt konsistent die Bezeichnungsanzeige in Balken.

  • Ein Fehler wurde behoben, der dazu führte, dass einige Kontextmenüaktionen im SQL-Editor nicht funktionierten.

16. November 2023

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

  • Databricks SQL-Abfragen, Warnungen und Dashboards verfügen über eine neue Planer- und Planungsschnittstelle.

  • Lakeview-Widgets lassen sich jetzt dank einer größeren Triggerzone für die Größenanpassung leichter anpassen.

  • Arbeitsbereichsadministratoren können jetzt den Besitzer eines Lakeview-Dashboards ändern. Aus dem Bearbeitungsmodus auf einem Lakeview-Dashboard:

    • Klicken Sie auf Freigabe
    • Klicken Sie auf Zahnradsymbol.
    • Klicken Sie auf Neuen Besitzer zuweisen
  • Benutzer können Bezeichnungen in Lakeview ein- oder ausschalten.

Visualisierungen:

  • Neue Diagrammbeschriftungen werden jetzt bevorzugt innerhalb eines Balkens platziert, wenn dies möglich ist.
  • Neue Diagrammbeschriftungen werden jetzt ordnungsgemäß auf gestapelten Balken angezeigt, die breit genug sind, um die gesamte Beschriftung anzuzeigen.
  • Beschriftungsfarben in Balkendiagrammen sind jetzt konsistenter.

9. November 2023

Änderungen in Version 2023.50:

Highlights:

SQL-Sprachupdates: Die folgenden integrierten Funktionen wurden hinzugefügt:

  • from_xml: Parst ein XML STRING in eine STRUCT.
  • schema_of_xml: Leitet ein Schema von einem XML ab STRING.
  • session_user: Gibt den angemeldeten Benutzer zurück.
  • try_reflect : Gibt NULL anstelle der Ausnahme zurück, wenn eine Java-Methode fehlschlägt.

Die folgenden integrierten Funktionen wurden verbessert:

  • Funktionsaufruf. Tabellenargumente für Funktionen unterstützen Partitionierung und Sortierung: Sie können jetzt mithilfe von PARTITION BY und ORDER BY-Klauseln steuern, wie Tabellenargumente an eine Funktion übergeben werden.
  • mode: Unterstützung für einen optionalen Parameter, der ein deterministisches Ergebnis erzwingt.
  • to_char: Neue Unterstützung für DATE, TIMESTAMP und BINARY.
  • to_varchar: Neue Unterstützung für DATE, TIMESTAMP und BINARY.
  • array_insert() ist 1-basiert für negative Indizes: Die Funktion ist sowohl für positive als auch für negative Indizes 1-basiert. Es fügt nun ein neues Element am Ende des Eingabe-Arrays für den Index -1 ein.

Aktualisierungen der Benutzeroberfläche

Die in diesem Abschnitt aufgeführten Funktionen sind unabhängig von den oben beschriebenen SQL Warehouse-Computeversionen.

Visualisierungen:

  • QuickInfos für neue Diagramme zeigen nur darauf zeigende Elemente für Diagramme mit hoher Kardinalität.
  • Neue Diagramme richten zweiachsige Diagramme automatisch am Nullpunkt aus.
  • Diagramme haben gedrehte Beschriftungs- und Achsentextwinkelrichtung von -90 bis 90 Grad geändert.
  • Diagramme verwenden jetzt die Breite der Beschriftung, um die Rotation zu bestimmen.

Lakeview-Dashboards:

  • Fix: Tabellenzeilen in Lakeview-Dashboards fügen keinen vertikalen Abstand mehr hinzu, wenn nur eine kleine Anzahl von Zeilen zurückgegeben wird.
  • Beim Klonen eines neuen Lakeview-Dashboard-Widgets wird zunächst versucht, den Klon rechts neben dem Original zu platzieren, sofern genügend Platz auf der Canvas vorhanden ist. Wenn nicht genügend Speicherplatz verfügbar ist, wird der Klon unter dem Original platziert.
  • Sie können jetzt den Besitzer eines Lakeview-Dashboards über das Dialogfeld „Freigeben“ neu zuweisen.

SQL-Editor: AutoVervollständigen ist jetzt weniger aggressiv und schließt automatisch am Ende von Anweisungen

2. November 2023

Verbesserungen:

Im Folgenden werden Verbesserungen der Lakeview-Dashboard-Datenherkunft beschrieben:

  • Es wurden unterschiedliche Symbole für Tabellen, Ansichten und materialisierte Sichten hinzugefügt.
  • Es wurde Unterstützung für vertikales Scrollen im Falle vieler Upstream-Datenquellen hinzugefügt.
  • Fehlermeldung wurden verbessert, wenn der Viewer keine Berechtigungen für das Upstream-Objekt besitzt.
  • Das Messaging in Bezug auf Beispieldatentabellen und HMS-Daten wurde geklärt.
  • Es wurden Schlüsselwerttags zu Upstream-Datenquellen hinzugefügt.

Behebung:

  • Es wurde ein Problem in neuen Diagrammen behoben, das das Rendern nach dem Umbenennen einer Datenreihe mit booleschen Werten verhinderte.

26. Oktober 2023

Ändeurngen in Databricks SQL-Version 2023.45

Highlights:

Abfrageoptimierungen:

  • Entfernen des äußeren Joins, wenn es sich um verschiedene Aggregatfunktionen handelt SPARK-42583
  • Optimierung der Reihenfolge der Filter-Prädikate. SPARK-40045

SQL-Funktionsupdates:

  • Unterstützung der impliziten Auflösung des Alias von lateralen Spalten für Aggregate hinzugefügt. SPARK-41631
  • Unterstützung für implizites laterales Spaltenalias in Abfragen mit Window. SPARK-42217
  • Unterstützung für Datasketches HLLSketch. Siehe Aggregatfunktion hll_sketch_agg.
  • Die try_aes_decrypt()-Funktion wurde hinzugefügt. Siehe try_aes_decrypt-Funktion.
  • Unterstützung für den CBC-Modus für aes_encrypt() und aes_decrypt(). Weitere Informationen finden Sie unter aes_decrypt-Funktion.
  • Hinzufügen von 3-args-Funktionsaliasen DATE_ADD und DATE_DIFF.
  • Hinzufügen der Unterstützung für aes_encrypt-IVs und AAD. SPARK-43290
  • Implementieren von Bitmapfunktionen. SPARK-44154
  • Hinzufügen des to_varchar-Alias für to_char. Siehe to_varchar-Funktion.
  • Hinzufügen der array_compact-Unterstützung. Siehe array_compact-Funktion.
  • Unterstützung für udf luhn_check. Siehe luhn_check-Funktion.
  • Hinzufügen der Analysetoolunterstützung benannter Argumente für integrierte Funktionen. SPARK-44059
  • Unterstützung für TABLE-Argumentparserregel für TableValuedFunction. SPARK-44200
  • array_insert schlägt jetzt mit 0 Index fehl. SPARK-43011
  • Hinzufügen der NULL-Werte für INSERT mit vom Benutzer angegebenen Listen mit weniger Spalten als die Zieltabelle hinzufügen. SPARK-42521
  • DECODE-Funktion gibt falsche Ergebnisse zurück, wenn NULL übergeben wurde SPARK-41668

Aktualisierungen der Benutzeroberfläche

Verbesserungen:

  • Der Lakeview SQL-Editor unterstützt jetzt Tastenkombinationen zum Ausführen von Abfragen.

  • Filter in Lakeview enthalten jetzt schnelle relative Datumsbereichsauswahlen für die letzten 7, 14, 28, 30, 60 und 90 Tage.

  • Perioden in Datenfeldnamen führen nicht mehr zu leeren Diagrammen.

  • Der Legacyschemabrowser funktioniert jetzt mit Unity Catalog.

  • Es wurden Leistungsverbesserungen implementiert, um nur die aktive Registerkarte im SQL-Editor zu laden, wodurch die anfängliche Ladezeit um bis zu 20 % verringert wird.

  • KI-generierte Tabellenkommentare im Katalog-Explorer sind jetzt allgemein verfügbar.

Fehlerbehebungen:

  • Balken in zeitlichen Balkendiagrammen werden jetzt über dem Datumsteilstrich zentriert.
  • Datenbezeichnungsvorlagen mit Aggregatausdrücken verwenden jetzt die richtigen numerischen Formatierer.
  • Das Zoomen in neuen Diagrammen funktioniert jetzt auch bei einer auf kategorisch eingestellten Skala mit zeitlichen Daten.

Neuer Artikel:

  • Es wurde ein neuer Artikel mit allen Lakeview-Visualisierungen veröffentlicht, einschließlich Screenshots und Notizen, die zeigen, wie jede Visualisierung in jedem Screenshot neu erstellt wird. Weitere Informationen finden Sie unter Dashboardvisualisierungstypen.

19. Oktober, 2023

Verbesserungen:

  • Drag & Drop im Schemabrowser ist jetzt verfügbar.

  • Die modale Auswahltabelle in Lakeview-Dashboards erleichtert die Auswahl aus allen Tabellen in einem Katalog oder Schema und verwendet jetzt AutoVervollständigen für Suchvorhersagen während der Eingabe.

Fehlerbehebungen:

  • QuickInfo-Anweisungen zur Legendenauswahl geben Mac-Benutzern vor, cmd zu verwenden und Windows-Benutzern ctrl zu verwenden.

  • Verbesserte Sichtbarkeit abgeschnittener Nachrichten in Lakeview-Dashboards, wenn gerenderte Daten Grenzwerte überschreiten.

  • Diagramme mit abgeschnittenen Daten zeigen konsistente Farben an, wie im Editor zu sehen.

12. Oktober 2023

Verbesserungen:

  • Textfilterwerte, die Sonderzeichen enthalten, filtern jetzt in Lakeview-Dashboards richtig.

  • Neue Diagramme unterstützen @@name Datenbeschriftungen auf Punktdiagrammen.

  • Angepasste Prozentformate gelten für gruppierte Diagramm-QuickInfos in neuen Diagrammen.

  • Die Ui für die Arbeitsbereichsbindungserweiterung ist GA.

Fehlerbehebungen:

  • Die Darstellung von Beschriftungen in neuen Diagrammen wurde verbessert, um zu verhindern, dass die Beschriftungen über die Grenzen des Diagramms hinausgehen.
  • Erhöht den Kontrast von Teilstrich- und Gitternetzlinien in neuen Diagrammen, um die Sichtbarkeit zu verbessern.
  • Erhöhen Sie den Abstand zwischen Achsenbezeichnungen, um die Lesbarkeit neuer Diagramme zu verbessern.

5. Oktober 2023

Verbesserungen:

  • Genaue QuickInfos wurden für Veröffentlichungsmodusaktionen und Datumsherkunft in Lakeview-Dashboards hinzugefügt.

  • Bedingte Formatierung und Linkvorlagen in Lakeview-Tabellenvisualisierungen unterstützen jetzt ausgeblendete Spalten.

  • Optimierte Beschriftungspositionierung für temporale Breitbalkendiagramme zur Verbesserung der Klarheit in neuen Diagrammen.

  • Die Zählervisualisierung in Lakeview behält ihre Transformationen bei, auch nachdem andere Felder entfernt wurden, wodurch Konsistenz gewährleistet wird.

  • Wenn Sie auf eine Datenreihe in einem Diagramm zeigen, werden nun die umgebenden Datenreihen in der QuickInfo abgeblendet, um die Lesbarkeit in neuen Diagrammen zu verbessern.

  • Neue Diagramme mit Prozentwerten zeigen jetzt QuickInfos mit absoluten Werten an.

  • Unterstützung für AutoVervollständigen für das Erstellen von Volumes wurde hinzugefügt.

  • Das Schließen einer nicht aktiven Registerkarte wechselt nicht mehr zu anderen Registerkarten.

  • Die ausgewählte Ausführung zeigt deutlich an, wenn Text hervorgehoben wird.

Fehlerbehebungen:

  • Verbesserte Fehlermeldungstexte in Pivot-Tabellen, wenn die Daten abgeschnitten werden.

  • Es wurde ein Renderingfehler in Pivot-Tabellen behoben, bei dem Farben beim Verwenden von BigInt-Datentypen nicht angezeigt wurden.

  • Beim Herunterladen von PNGs in neuen Diagrammen mit zahlreichen Legendenelementen wurde das Farbsymbol für Überlauflegendeneinträge entfernt.

  • Linien in neuen Diagrammen behalten auch am obersten Rand der Ansicht eine konsistente Dicke bei.

  • Wenn in Lakeview kein Dataset vorhanden ist, ist die Datasetauswahl im Canvas leer.

  • Delta Live Tables werden vom SQL-Parser ordnungsgemäß erkannt und werden im Schemabrowser nicht als ungültige Tabellen angezeigt.

  • QuickInfos wurden zur Randleiste hinzugefügt.

28. September 2023

Verbesserungen:

  • Veröffentlichte Lakeview-Dashboards verfügen jetzt über eine Schaltfläche „Aktualisieren“.

  • Verbesserte Fehlermeldungen für Benutzer, die keinen Zugriff auf ein Lakeview-Dashboard haben.

  • Die Filterkonfiguration in Lakeview-Dashboards listet jetzt gültige Felder oben in der Auswahlliste auf.

  • Wenn Sie ein Diagramm als PNG-Datei aus dem Lakeview-Dashboard herunterladen, bleiben nun der Titel und die Beschreibung erhalten.

  • Die Verbesserung des Delta-Tabellenverlaufs im Katalog-Explorer umfasst das Hinzufügen von Filtern für Datumsbereich, Benutzer*innen und Vorgangstyp sowie sortierbare Spalten und Inlinelinks zu zugeordneten Aufträgen und Notebooks.

  • Unterstützung im dunklen Modus wurde über Legenden, QuickInfos und Tabellenvisualisierung hinweg hinzugefügt.

Behebung:

  • Die Filterauswahl wird beim Aktualisieren eines Lakeview-Dashboards nicht mehr gelöscht.

21. September 2023

Verbesserungen:

  • Die Leistung beim Rendern von PivotTables wurde verbessert.
  • Neues DuBois-Muster für tabellarische Herkunftsansichten auf der Benutzeroberfläche

14. September 2023

Verbesserung:

7. September  2023

Databricks SQL-Version 2023.40 verfügbar

Rolloutzeitplan

  • Previewrollout für 2023.40: Zwischen dem 5. September 2023 und dem 11. September 2023
  • Aktueller Rollout für 2023.40: Zwischen dem 18. September 2023 und dem 25. September 2023

Änderungen bei Version 2023.40:

  • Tags sind jetzt in Unity Catalog verfügbar.
  • Databricks Runtime gibt einen Fehler zurück, wenn eine Datei zwischen Abfrageplanung und -aufruf geändert wird.
  • Azure Databricks ODBC/JDBC-Treiberunterstützung
  • Aktivieren des Bezeichnens von Zeitreihenspalten
  • Neue Bitmap SQL-Funktionen
  • Verbesserte Verschlüsselungsfunktionen
  • Unity Catalog-Unterstützung für REFRESH FOREIGN.
  • INSERT BY NAME wird jetzt unterstützt.
  • Freigeben materialisierter Sichten mit Delta Sharing

Aktualisierungen der Benutzeroberfläche

Verbesserungen:

  • Neue Diagramme mit schnellerer Renderleistung, schönen Farben und verbesserter Interaktivität sind jetzt verfügbar. Weitere Informationen finden Sie unter Neue Diagrammvisualisierungen in Databricks.

  • In der Diagrammansicht des Abfrageprofils können Sie nun den Verknüpfungstyp auf jedem Knoten anzeigen, der eine Verknüpfung im Abfrageplan enthält.

  • Data Explorer wird in Katalog-Explorer umbenannt, um der Tatsache Rechnung zu tragen, dass Sie damit mit allen sicherungsfähigen Objekten in Unity Catalog arbeiten können, nicht nur mit Datenobjekten. Siehe Was ist der Katalog-Explorer?.

  • Die API für die Ausführung der Databricks SQL-Anweisung ist jetzt mit Databricks SQL Version 2023.35 und höher allgemein verfügbar. Die API ermöglicht es Ihnen, SQL-Anweisungen für die Ausführung in einem Databricks SQL-Warehouse zu übermitteln, den Status zu überprüfen und Ergebnisse abzurufen oder eine sich in der Ausführung befindliche SQL-Anweisung abzubrechen. Weitere Informationen finden Sie unter API für die Anweisungsausführung.

31. August 2023

Neues Feature:

24. August 2023

Verbesserung:

  • „AutoVervollständigen“ beendet Empfehlungen, nachdem Sie die LEERTASTE gedrückt haben.
  • Der Schemabrowser sieht live Delta Live Tables nicht mehr als fehlerhafte Tabellen an.

16. August 2023

Verbesserung:

  • Die Dropdownliste „Katalog” im SQL-Editor wird jetzt geschlossen, wenn Sie die Registerkarten wechseln. Zuvor blieb die Dropdownliste beim Wechsel der Registerkarten geöffnet.

August 10, 2023

Verbesserung:

  • AutoVervollständigen unterstützt jetzt die neue Syntax zum Festlegen von Unity Catalog-Tags. Informationen zu Befehlen finden Sie unter SQL-Sprachreferenz.

3. August 2023

Verbesserungen:

  • Der zugrunde liegende Monaco-Editor verwendet jetzt Version 37.1.
  • AutoVervollständigen-Support für SHOW ARCHIVED FILES FOR Delta-Befehle.

27. Juli 2023

Verbesserungen:

  • Der SQL-Editor ist jetzt mit Windows-Zeilenvorschubzeichen kompatibel. Dadurch wird sichergestellt, dass die Abfrageformatierung in allen Fällen wie erwartet funktioniert.
  • Sie können die Abfrageprofilnavigation aus Notebook-Ergebnissen öffnen. Führen Sie für Abfragen Ihre Abfrage mit SQL Warehouse aus.

20. Juli 2023

Databricks SQL-Version 2023.35 verfügbar

Rolloutzeitplan

  • Vorschaurollout für Version 2023.35: Zwischen dem 18. Juli 2023 und dem 24. Juli 2023
  • Aktueller Rollout für Version 2023.35: Zwischen dem 31. Juli 2023 und dem 8. August 2023

Änderungen in Version 2023.35:

  • Verbesserte Zuverlässigkeit für VACUUM mit flachem Klon in Unity Catalog.
  • Unterstützung für Python-UDFs in SQL.
  • Delta Lake UniForm for Iceberg befindet sich in der öffentlichen Vorschau.
  • Delta Lake Liquid Clustering befindet sich in der öffentlichen Vorschau.
  • Archivierungsunterstützung für Delta Lake.
  • Unterstützung der IDENTIFIER-Klausel.
  • Unity Catalog-Unterstützung für Python und Pandas User-Defined Functions (UDFs).

Verbesserung:

  • Tabellenpopularität in Katalog-Explorer ist für alle Unity Catalog-Benutzer verfügbar.

13. Juli 2023

Verbesserung:

  • Unity Catalog-Benutzer können jetzt zusätzliche Tabellenerkenntnisse in Katalog-Explorer anzeigen, z. B. häufig verknüpfte Tabellen, häufige Benutzer einer bestimmten Tabelle und häufig verwendete Notebooks und Dashboards.

22. Juni 2023

Public Preview:

  • Databricks SQL unterstützt jetzt große Sprachmodelle (Large Language Models, LLMs), die auf Modellbereitstellungsendpunkten gehostet werden. Rufen Sie ai_query() auf, um auf Ihr LLM zuzugreifen. Diese Funktion ist nur als öffentliche Vorschau in Databricks SQL Pro und als serverlos verfügbar. Um an der öffentlichen Vorschau teilzunehmen, füllen Sie das Registrierungsformular „KI-Funktionen: öffentliche Vorschau“ aus, und übermitteln Sie es.

15. Juni 2023

Neues Feature:

  • SQL-Aufgaben in Workflows sind jetzt allgemein verfügbar. Sie können Abfragen, Dashboards und Warnungen auf der Seite „Aufträge” organisieren. Siehe SQL-Aufgabe für Aufträge.
  • Ein neuer Schemabrowser befindet sich jetzt in der öffentlichen Vorschau mit einer aktualisierten Benutzeroberfläche, einer Registerkarte Für Sie und verbesserten Filtern. Der Schemabrowser ist in Databricks SQL, Katalog-Explorer und Notebooks verfügbar. Siehe Daten durchsuchen.

8. Juni 2023

DBSQL-Version 2023.30 verfügbar

Änderungen in Version 2023.30

  • Neue integrierte SQL-Funktionen wie array_prepend(array, elem), try_aes_decrypt(expr, key [, mode [, padding]]) und sql_keywords() .
  • Sie können jetzt flache Klone verwenden, um neue verwaltete Unity Catalog-Tabellen aus vorhandenen verwalteten Unity Catalog-Tabellen zu erstellen. Siehe Flacher Klon für verwaltete Unity Catalog-Tabellen.
  • Sie können jetzt CLONE und CONVERT TO DELTA mit Iceberg-Tabellen verwenden, die Partitionen für abgeschnittene Spalten der Typen int, long und string definiert haben. Abgeschnittene Spalten vom Typ decimal werden nicht unterstützt.
  • START VERSION ist jetzt für ALTER SHARE veraltet.

Aktualisierungen der Benutzeroberfläche

Behebung:

  • Die Zählervisualisierung unterstützt jetzt die Formatierung bei Verwendung großer ganzer Zahlen.

1. Juni 2023

Verbesserungen:

  • Binärdaten werden jetzt beim Verwenden des Pfeilformats als Hexadezimalzeichenfolge gerendert.

  • In der SQL-Anweisungs-API wird das CSV-Format jetzt für die Disposition EXTERNAL_LINKS unterstützt. Dadurch können Clients bis zu 100 GiB Daten im CSV-Format mit vorsignierten URLs extrahieren, während der INLINE-Grenzwert für JSON bei 16 MiB liegt.

  • Azure Databricks SQL Pro ist in allen Regionen in China verfügbar. SQL Pro ist jetzt das Standardwarehouse in der Benutzeroberfläche. Der API-Standardwert ist weiterhin „Klassisch“.

29. Mai 2023

Neues Feature:

25. Mai 2023

Verbesserungen:

  • Sie können jetzt den Ergebnisbereich für die automatische Vervollständigung umschalten.
  • Deaktivieren Sie die EINGABETASTE, damit er keine Vorschläge zur automatischen Vervollständigung mehr akzeptiert. Klicken Sie unter DBSQL-Benutzereinstellungen auf Editoreinstellungen und dann auf Neue Editoreinstellungen. Deaktivieren Sie die Option Eingabetaste akzeptiert Vorschläge zur automatischen Vervollständigung.

Fehlerbehebungen:

  • Sortierte Tabellenkopfzeilen haben jetzt Farben.
  • Diagrammlinien werden jetzt ordnungsgemäß gerendert.

18. Mai 2023

Verbesserung:

  • In der SQL-Anweisungs-API unterstützt die Disposition „EXTERNAL_LINKS“ jetzt das JSON_ARRAY-Format. Sie können mit vorsignierten URLs bis zu 100 GiB Daten im JSON-Format extrahieren. Das INLINE-Limit für JSON beträgt 16 MiB.

11. Mai 2023

Neues Feature:

  • Der Schemabrowser ist jetzt allgemein in Katalog-Explorer verfügbar.

Verbesserungen:

  • Das Anzeigen des Detailbereichs der Tabelle mithilfe des Mauszeigers ist nun weniger empfindlich.
  • Die ESC-TASTE schließt jetzt den Bereich "AutoVervollständigen".
  • Ansichtsdefinitionen verfügen jetzt auf der Registerkarte „Details“ des Katalog-Explorer über Syntaxhervorhebungen.

Fehlerbehebungen:

  • PivotTables werden auf Windows-Geräten jetzt ordnungsgemäß gerendert.
  • Vervollständigungsvorschläge folgen nun ordnungsgemäß dem Fall des ersten Schlüsselworts.

4. Mai 2023

Databricks SQL-Version 2023.26 verfügbar

Rolloutzeitplan

  • Vorschaurollout für Version 2023.26: Zwischen dem 19. April 2023 und dem 25. April 2023
  • Aktueller Rollout für Version 2023.26: Zwischen dem 3. Mai 2023 und dem 10. Mai 2023

Änderungen in Version 2023.26

  • Photon gibt einen Fehler zurück, wenn eine Datei zwischen Abfrageplanung und -ausführung geändert wird.
  • Neue Features und erweiterte Unterstützung für Vorhersage-E/A-Features. Siehe Databricks Runtime 13.0 (EoS).
  • Verwenden des Azure Databricks-Connectors zum Herstellen einer Verbindung mit einem anderen Azure Databricks-Arbeitsbereich.
  • CREATE TABLE LIKE-Feature für Delta-Tabellen.
  • Neue Spaltenfelder mit Metadaten über Dateiblockstart und -länge.
  • Neue H3-Geodatenfunktionen. Weitere Informationen finden Sie unter H3-Geodatenfunktionen.
  • Neue integrierte SQL-Funktionen. Siehe Databricks Runtime 13.0 (EoS).

Aktualisierungen der Benutzeroberfläche

Verbesserungen:

  • Administratoren können Warehousebesitzer mithilfe der Benutzeroberfläche oder der API ändern. Weitere Informationen finden Sie unter Verwalten eines SQL-Warehouse.
  • Katalog-Explorer zeigt jetzt Kontodienstprinzipale in Benutzerlisten für Ressourcen in Unity Catalog an. Beispielsweise sind Kontodienstprinzipale sichtbar, wenn Berechtigungen bearbeitet oder Besitzer in Katalog-Explorer geändert werden.
  • Benutzerdefinierte Diagrammbezeichnungen unterstützen die Möglichkeit, auf jede Spalte innerhalb des Datasets zu verweisen.
  • Dashboardfilter laden jetzt Spaltennamen, auch wenn Abfragen ohne Katalog- oder Schemainformationen verwendet werden.

27. April 2023

Verbesserungen:

  • Der SQL-Editor greift jetzt auf den Monaco-Editor zurück, um eine zuverlässigere Bearbeitung zu ermöglichen.
  • Die Listenseite des SQL-Verlaufs (Abfragen) enthält jetzt das Dubois Design System.

20. April 2023

Verbesserungen:

  • Führt neue Pivottabellen ein, mit denen Sie mehr als 64.000 Ergebnisse aggregieren können.
  • Databricks SQL-Tabellen und -Visualisierungen unterstützen jetzt BigInt, 38-Bit-Dezimalstellen und Nicht-UTF-8-Zeichen. Für Zahlen lautet die Standardeinstellung jetzt „benutzerdefinierte Zifferngenauigkeit“.
  • AutoVervollständigen schlägt jetzt häufige Joins aus der Vergangenheit für Unity Catalog-Tabellen vor, die von Unity Catalog-Herkunftsdaten in Databricks Runtime 12.0 und höher unterstützt werden.

Neues Feature:

  • Gibt Text zurück, der von einem ausgewählten Large Language-Modell (LLM) generiert wurde, wenn die Eingabeaufforderung ai_generate_text verwendet wird. Diese Funktion ist nur als öffentliche Vorschau in Databricks SQL Pro und Serverless verfügbar. Um an der öffentlichen Vorschau teilzunehmen, füllen Sie das Registrierungsformular „AI Functions: öffentliche Vorschau“ aus, und übermitteln Sie es.

13. April 2023

Neues Feature:

  • Der TIMESTAMP_NTZ-Typ stellt Werte dar, die aus den Feldern „Jahr“, „Monat“, „Tag“, „Stunde“, „Minute“ und „Sekunde“ bestehen. Alle Vorgänge werden unabhängig von der Zeitzone ausgeführt. Siehe TIMESTAMP_NTZ-Typ.

Verbesserungen:

  • Benutzer können jetzt formatierte Ergebnisse innerhalb von Warnungen senden, indem sie das QUERY_RESULT_TABLE-Tag in einer benutzerdefinierten Warnmeldung verwenden.
  • Benutzer können jetzt die Dateigröße für Unity Catalog-Tabellen in Katalog-Explorer anzeigen.

6. April 2023

Databricks SQL-Version 2023.20 verfügbar

Rolloutzeitplan

  • Vorschaurollout für Version 2023.20: Zwischen dem 15. März 2023 und dem 23. März 2023
  • Aktueller Rollout für Version 2023.20: Zwischen dem 27. März 2023 und dem 3. April 2023

Änderungen in Version 2023.20

  • Die Delta Lake-Schemaentwicklung unterstützt das Angeben von Quellspalten in MERGE-Anweisungen.
  • Entfernen Sie mithilfe von array_compact alle NULL-Elemente aus einem Array.
  • Verwenden Sie zum Anfügen von Elementen an ein Array array_append.
  • Verwenden Sie die Maskenfunktion, um vertrauliche Zeichenfolgenwerte zu anonymisieren.
  • Allgemeine Fehlerbedingungen geben jetzt SQLSTATE zurück.
  • Rufen Sie Tabellenwertgenerator-Funktionen in der regulären FROM-Klausel einer Abfrage auf.
  • Sie können die Funktionen „from_protobuf“ und „to_protobuf“ verwenden, um Daten zwischen Binär- und Struct-Typen auszutauschen. Weitere Informationen finden Sie unter Lesen und Schreiben von Protokollpuffern.
  • Verbesserte Konsistenz für das Delta-Commitverhalten für leere Transaktionen im Zusammenhang mit update-, delete- und merge-Befehlen.
  • Behavior Change
    • Das Feature „Lateraler Spaltenalias“ führt Behavior Changes während der Namensauflösung ein. Siehe Behavior Changes.

Aktualisierungen der Benutzeroberfläche

Verbesserungen:

  • Katalog-Explorer unterstützt jetzt das Löschen des Hive-Metastores.
  • Die Meldung für den Anfangszustand des Visualisierungs-Editors wurde von Fehlende erforderliche Spalten in Keine Daten geändert.

3. April 2023

Neues Feature:

30. März 2023

Verbesserungen:

  • Auf der Seite zur Überwachung des Warehouses können Sie nun den Abfrageverlauf für den ausgewählten Zeitbereich zusammen mit Ihren Skalierungsdiagrammen anzeigen. Sie können auch aktuell ausgeführte und Abfragen in der Warteschlange, aktive SQL-Sitzungen, den Status des Warehouses sowie die aktuelle Clusteranzahl anzeigen. Siehe Überwachen eines SQL-Warehouse.
  • Das Kartenclustering in Markerkarten ist jetzt standardmäßig deaktiviert.
  • Es wurden QuickInfos zum Abschneiden von Visualisierungen und Rendergrenzwerten hinzugefügt.

Fehlerbehebungen:

  • Diagramme berücksichtigen nun die ursprüngliche Reihenfolge, wenn die Sortierung für die Achsenwerte deaktiviert ist, und das Diagramm verfügt über die Gruppierung nach Spalte.

23. März 2023

Verbesserungen:

  • Visualisierungen unterstützen jetzt die Zeiteinteilung nach Woche.
  • Total“ berechnet in Pivottabellen von Notebooks jetzt alle Daten über die 100 x 100 Zellen hinaus (bis zu 64.000 Ergebnisse).
  • Benutzer können jetzt Zellenwerte in der neuen Pivottabelle für Notebooks formatieren.
  • Die Datei-, Abfrage- und Featurespeicherherkunft ist verfügbar.

16. März 2023

Verbesserung:

  • Unterstützung für die GROUP BY ALL-Syntax.

9. März 2023

Neues Feature:

  • Die „Databricks SQL Statement Execution“-API ist jetzt in der öffentlichen Vorschau verfügbar. Diese API stellt Endpunkte bereit, die SQL-Anweisungen in einem Databricks SQL-Warehouse ausführen. Sie kann auch den Status überprüfen, Ergebnisse abrufen und eine ausgeführte SQL-Anweisung abbrechen.

Verbesserung:

  • Die SQL-Verwaltungskonsole wurde mit den allgemeinen Administratoreinstellungen kombiniert, um eine einheitliche Benutzeroberfläche für Administratorbenutzer zu schaffen. Auf alle SQL-Administratoreinstellungen kann jetzt über die Verwaltungskonsole zugegriffen werden.
  • Warnungsziele werden jetzt als Benachrichtigungsziele bezeichnet.

Fehlerbehebungen:

  • In Tabellen werden keine zwei Bildlaufleisten mehr angezeigt.
  • Leere Widgettitel werden in Dashboards nicht länger überschrieben.

2. März 2023

Behebung:

  • Sie können jetzt relative URLs in Tabellen verwenden, um auf Dashboards zuzugreifen.

23. Februar 2023

Verbesserung:

  • TINYINT“ wird jetzt in Ergebnistabellen in Notebooks unterstützt.

Behebung:

  • Es wurde ein Fehler behoben, bei dem das Scrollen auf dem Filter „Dashboard erstellen“ zu einem Fehler führte.

16. Februar 2023

Verbesserungen:

  • Datenbeschriftungen in Diagrammen zeigen jetzt mehr Zeichen an, um zu vermeiden, dass Beschreibungen abgeschnitten werden.
  • AutoVervollständigen erkennt jetzt range()- und Python UDF create-Funktionen.
  • AutoVervollständigen vermeidet jetzt das Initiieren von Codeschnipseln auf Dezimalstellen und innerhalb von Codekommentaren.

Fehlerbehebungen:

  • Benutzer können nun Karten vergrößern.
  • In Notebooks werden Diagrammen Farben nun ordnungsgemäß zugewiesen.

2. Februar 2023

Verbesserungen:

  • Unterstützung für „DESCRIBE DETAILS“ im Editor.
  • Verbesserte Ladegeschwindigkeit des Schemabrowsers.
  • Sie können jetzt eine Liste möglicher Spalten im Seitenbereich eines „SELECT *“ anzeigen.

26. Januar 2023

Verbesserung:

  • Die Fehlermeldungen Ihrer Abfrage enthalten jetzt Links zum zugehörigen Dokumentationsthema, in dem der Fehler beschrieben wird.

19. Januar 2023

Verbesserungen:

  • Der Bereich Neuerungen wurde eingeführt, in dem wichtige Verbesserungen angegeben sind. Sie können diesen Bereich öffnen und schließen, indem Sie auf das Geschenksymbol klicken.
  • Administratoren können jetzt den Besitz von SQL-Warehouses ändern.
  • Sie können jetzt mehrere Visualisierungen auf einem Dashboard filtern, indem Sie auf Hinzufügen>Filter klicken und die Abfrage und die Spalten zum Filtern auswählen.

12. Januar 2023

Verbesserungen:

  • Titel von Visualisierungswidgets auf Dashboards haben jetzt standardmäßig das Format Visualisierungsname – Abfragename.
  • Dem Inlinebereichsverweis wurden H3-Geofunktionen hinzugefügt.
  • Inlineverweise für SQL-Syntax wie CREATE TABLE und OVER wurden hinzugefügt.

Fehlerbehebungen:

  • Umschaltflächen zum Sortieren und Umkehren sind jetzt verfügbar, wenn die X-Achsenskala auf „Automatisch“ festgelegt ist.
  • Wärmebilder und Pivottabellen reagieren jetzt bei bestimmten Grenzfällen.
  • Die Teilstriche der Y-Kategorieachse sind jetzt standardmäßig sortiert.
  • Abfrageentwürfe gehen nach einer Browseraktualisierung nicht mehr verloren.

8. Dezember 2022

  • Azure Databricks SQL-Warnungen unterstützen jetzt Warnungen für Aggregationen von Abfrageergebnisspalten wie SUM, COUNT und AVG.
  • Der Standardvisualisierungstitel lautet jetzt „VisualizationName – QueryName“, wenn neue Widgets auf Dashboards erstellt werden.

17. November 2022

Alerts:

  • Chatworks, Mattermost und Google Hangouts Chat sind keine Benachrichtigungsziele mehr.

Verbesserung:

Fehlerbehebungen:

  • Es wurde ein Problem in Databricks SQL-Warnungen behoben, bei dem der Vergleich mit NULL-Werten falsch ausgewertet wurde.
  • Es wurde ein Problem behoben, bei dem Bildlaufleisten für Pivottabellen nicht mehr angezeigt wurden.
  • Es wurde ein Problem behoben, bei dem die Größe des Schemabrowsers mit überlaufenen Registerkarten nicht geändert werden konnte.

10. November 2022

Verbesserung:

  • Sie können jetzt einen Dashboardfilter erstellen, der für mehrere Abfragen gleichzeitig funktioniert. Wählen Sie im Dashboardmodus „Bearbeiten“ die Optionen Hinzufügen, dann Filter und Neuer Dashboardfilter aus.
  • AutoVervollständigen unterstützt jetzt CREATE MATERIALIZED VIEW.

Behebung:

  • Es wurde ein Problem behoben, bei dem beim Scrollen bis zum Ende einer Reihe von ausgelagerten Ergebnissen des Dashboards ein Fehler ausgegeben wurde.
  • Es wurde ein Problem behoben, bei dem beim Wechseln von einem gestapelten Balkendiagramm zu einem Liniendiagramm die Stapeleigenschaft beibehalten wurde.
  • Doppelte Abrufaufrufe wurden behoben.

3. November 2022

Verbesserung:

  • Beim Anfordern des Zugriffs in Databricks SQL lautet die Standardberechtigung jetzt „Kann ausführen“.

Fehlerbehebungen:

  • Es wurde ein Problem behoben, bei dem die Sortierung nach created_at mithilfe der API für Abfragen und Dashboards nicht die richtige Sortierreihenfolge zurückgibt.
  • Es wurde ein Problem behoben, bei dem Spalten, die URLs mit HTML-Formatierung enthalten, übermäßig breite Spaltenbreiten aufwiesen.
  • Es wurde ein Problem behoben, bei dem das Schlüsselwort WHERE nicht hervorgehoben war.

27. Oktober 2022

Verbesserungen:

  • Das Zeilenlimit für das Herunterladen von Abfrageergebnissen in Excel wurde von 64.000 Zeilen auf 100.000 Zeilen erhöht. CSV- und TSV-Downloadlimits bleiben unverändert (ca. 1 GB Daten).

  • AutoVervollständigen unterstützt jetzt LIST-Syntax, -URLs und -Anmeldeinformationen.

  • Fix-me-Vorschlagsfenster wurden konsolidiert und modernisiert.

  • Ein neuer Warehouse-Typ, Databricks SQL Pro, wird für Databricks SQL eingeführt. Mit diesem Warehouse-Typ kann ein Databricks SQL-Warehouse Auftragsintegration, Abfrageverbund, Geodatenfeatures und Vorhersage-E/A verwenden.

Fehlerbehebungen:

  • Es wurde ein Problem behoben, bei dem das Warnbanner im Editor Visualisierungen in voller Höhe überlappt.
  • Es wurde ein Problem behoben, bei dem die Tabellenspaltenbreite beim Verschieben von Spalten der Tabelle nicht beibehalten wurde.
  • Es wurde ein Problem behoben, bei dem die Verknüpfung zum Dashboard in Popupbenachrichtigungen fehlerhaft war, wenn eine Visualisierung aus dem SQL-Editor hinzugefügt wurde.

20. Oktober 2022

Verbesserungen:

  • Sie finden die Statusleiste der Abfrage nun in der Fußzeile und den Bearbeitungsbereich einer Visualisierungsaktion im Hamburger-Menü.
  • AutoVervollständigen unterstützt jetzt Delta-Zeitreisen und ermöglicht die automatische Vervollständigung von Spalten beim Definieren eines Fremdschlüssels.

Behebung:

  • Es wurde ein Problem behoben, bei dem das Hinzufügen mehrerer Visualisierungen zu einem Dashboard in kurzer Folge dazu führt, dass Visualisierungen nicht auf dem Dashboard angezeigt wurden.

13. Oktober 2022

Verbesserungen:

  • Jetzt können Sie gemeldete Fehlermeldungen entfernen.
  • Die COMMENT ON-Anweisung wird jetzt im Editor unterstützt.
  • Sie können jetzt Cmd+P oder Strg+P (für PC) als Verknüpfung für die Top-Suche verwenden. Verwenden Sie Cmd+I oder Strg+I (für PC) zum Hinzufügen von Parametern.

11. Oktober 2022

Verbesserungen:

6. Oktober 2022

Verbesserungen:

  • EXTERNAL ist jetzt eine reservierte Tabelleneigenschaft. Die Befehle CREATE TABLE ... TBLPROPERTIES und ALTER TABLE ... SET TBLPROPERTIES schlagen fehl, wenn in den Eigenschaften EXTERNAL angegeben ist.
  • Der strfmt In format_string(strfmt, obj, ...) und printf(strfmt, obj, ...) unterstützt nicht mehr die Verwendung von 0$ als erstes Argument. 1$ sollte auf das erste Argument verweisen, wenn Sie einen Argumentindex verwenden, um die Position des Arguments in der Argumentliste anzugeben.
  • Kreisdiagrammsegmente haben jetzt einen dünnen Rahmen, um die einzelnen Segmente voneinander abzugrenzen.
  • Sie können jetzt Cmd+I (für Mac) oder Strg+I (für PC) als Verknüpfung zum Hinzufügen des Parameters verwenden. Verwenden Sie Cmd+P oder Strg+P (für PC) als Verknüpfung für die Globale Suche.
  • Sowohl für positive als auch für negative Abfragefehlermeldungen steht eine Feedbackschaltfläche zur Verfügung.
  • Vorschläge zur Fehlerbehebung stehen jetzt als schnelle Problembehebung zur Verfügung.

Fehlerbehebungen:

  • lpad- und rpad-Funktionen funktionieren jetzt ordnungsgemäß mit BINARY-Zeichenfolgeneingaben. Die Ausgabe von lpad und rpad für BINARY-Zeichenfolgeneingaben ist jetzt eine BINARY-Zeichenfolge.
  • Es wurde ein Problem behoben, bei dem manuelle Warnungsaktualisierungen nicht funktioniert haben.
  • Es wurde ein Rollback zu Änderungen an der automatischen Zählerdimensionierung ausgeführt, um Formatierungsprobleme zu beheben.

29. September 2022

Verbesserungen:

  • Sie können jetzt den Zugriff auf Databricks-SQL-Abfragen, Warnungen und Dashboards von den Besitzern dieser Ressourcen anfordern.
  • Sie können jetzt auf der Seite „Abfrageverlauf“ nach Abfragedauer und Anweisungstyp filtern.
    • Um den Abfragedauerfilter zu verwenden, geben Sie einen Zeitraum ein, und wählen Sie eine Zeiteinheit aus. Das Verlaufsergebnis gibt Abfragen zurück, die länger als die angegebene Zeit ausgeführt werden.
    • Um den Anweisungstypfilter zu verwenden, wählen Sie einen Anweisungstyp aus der Dropdownliste aus. Das Verlaufsergebnis gibt Abfragen zurück, die diese Anweisung enthalten.

Behebung:

  • Es wurde ein Problem behoben, bei dem nicht alle unterstützten HTML-Tags in benutzerdefinierten Warnungsvorlagen funktioniert haben. Alle Tags sind als dokumentiert verfügbar.
  • Es wurde ein Problem behoben, bei dem Popups für Visualisierungsbenachrichtigungen angezeigt wurden. Doppelklicken Sie beispielsweise, um eine Visualisierung zu verkleinern, die zuvor nicht angezeigt wurde.
  • Es wurde ein Problem behoben, bei dem das Austauschen der Achsen in einem Diagramm nicht im Diagrammnamen widergespiegelt wurde.

22. September 2022

Verbesserungen:

  • Zähler-Widgets derselben Größe verfügen über dieselbe Schriftgröße, wenn mehrere Zähler-Widgets auf einem Dashboard angezeigt werden.
  • Es wurden Kombinationsdiagramme aktualisiert, sodass bei Verwendung der dualen Achse nur derselbe Diagrammtyp (z. B. Linien, Balken) auf derselben Achse verwendet werden kann. Serienaliase werden ebenfalls auf die Achse angewendet.
  • Es wurde Unterstützung für automatisches Vervollständigen für Ersatzschlüssel und LIST-Vorgänge hinzugefügt.

Behebung:

  • Es wurde ein Problem behoben, bei dem Textparameter Null nicht als gültigen Wert akzeptiert haben.

15. September 2022

Behebung:

  • Es wurde ein Problem behoben, bei dem das Anzeigen des Abfrageverlaufs auf der Eintragsseite für SQL-Warehouses nicht funktionierte.

8\. September 2022

Verbesserung:

  • Einführung der neuen Karte „Open-Source-Integrationen“ auf DSE/SQL-Homepages, die Open-Source-Integrationsoptionen wie Delta Live Tables und dbt core anzeigt.

Behebung:

  • Es wurde ein Problem behoben, bei dem Parameter-Dropdownmenüs auf der Registerkarte „Visualisierung“ blockiert wurden.

1. September 2022

Verbesserungen:

  • Einführung einer neuen vereinfachten Benutzeroberfläche zum Hinzufügen von Parametern und Filtern. Wählen Sie und fügen Sie einen Filter oder Parameter hinzu.
  • Die Klammern von SQL-Tokens wie „OVER()“ werden jetzt automatisch vervollständigt.

Fehlerbehebungen:

  • Es wurde ein Problem behoben, bei dem beim Anzeigen des Dashboards im Vollbildmodus die Farbpalette ignoriert wurde.
  • Es wurde ein Problem behoben, bei dem bei schneller Eingabe und anschließender Verwendung der Tastenkombination Ausführen der vorherige Abfragetext anstelle des neu eingegebenen Abfragetexts ausgeführt wurde.
  • Problem behoben, bei dem bei Verwendung des Tastaturbefehls Strg+Eingabe zum Ausführen von Abfragen doppelte Abfragen gesendet wurden.

25. August 2022

Behebung:

  • Es wurde ein Problem behoben, bei dem Dashboard-Filter nicht aktualisiert wurden, wenn Abfrageparameter geändert wurden.

18. August 2022

  • Für Databricks SQL ist Unity Catalog (öffentliche Vorschau) im Vorschaukanal verfügbar. Weitere Informationen finden Sie unter Was ist Unity Catalog.

  • Dokumentation: Dokumentation zur Alerts-API wurde veröffentlicht.

  • Visualisierungen: Benutzer können jetzt Standardwerte für Datumsfilter festlegen. Jedes Mal, wenn der Filter in einer Abfrage oder einem Dashboard aktualisiert wird, wird der Standardwert angewendet.

  • Fehlerbehebungen:

    • Es wurde ein Problem behoben, bei dem das Anwenden von Änderungen nicht funktionierte, wenn ein Dashboard immer noch neu geladen wurde.
    • Es wurde ein Problem behoben, bei dem Spalten zu schmal waren, wenn eine Abfrage keine Ergebnisse zurückgab.

11. August 2022

Verbesserungen:

  • Benutzer können E-Mails empfangen, wenn ihre Aktualisierungen nicht erfolgreich sind. Um solche Benachrichtigungen zu aktivieren, navigieren Sie in der Verwaltungskonsole zur Registerkarte SQL-Einstellungen. Wählen Sie unter Fehler-E-Mails die Art des Objekts (Abfrage, Dashboard oder Warnung) aus, für das Sie Fehlerbenachrichtigungen erhalten möchten. Fehlerberichte werden stündlich gesendet.
  • Visualisierungen
    • Es wird eine neue, moderne Farbpalette für Visualisierungen und Dashboards eingeführt. Wenn Sie ein Dashboard auf die neue Farbpalette umstellen möchten, klicken Sie auf Ihrem Dashboard auf  > >, und wählen Sie die Databricks-Farbpalette aus. SQL-Administratoren können die neue Farbpalette auch als Standardoption für einen Arbeitsbereich festlegen, indem sie zu  > > > navigieren und die neue Palette auswählen.

Fehlerbehebungen:

  • Es wurde ein Problem behoben, das dazu führte, dass das Anwenden eines Filters durch Auswählen von nicht funktionierte, wenn bereits eine Abfrage ausgeführt wurde.

4. August 2022

Verbesserungen:

  • Beim Klonen eines Dashboards gibt es jetzt eine Option, mit der Sie angeben können, ob Abfragen ebenfalls geklont werden sollen.
  • Registerkarteninhalte werden in allen Browserregisterkarten synchronisiert. Der Status Ihrer Abfrage wird jetzt in allen Browserregisterkarten synchronisiert. Wenn Sie an Abfrage 1 in der Browserregisterkarte 1 arbeiten und dann zu Browserregisterkarte 2 wechseln, ist Abfrage 1 genau in dem Zustand, den diese auf der ursprünglichen Browserregisterkarte hatte.

Behebung:

  • Bezeichnungen für leere Zeichenfolgen im Kreisdiagramm spiegeln nun wider, dass die Zeichenfolge leer ist und nicht der Index des Werts.

28. Juli 2022

  • Alerts
    • Benutzerdefinierte E-Mail-Vorlagen für Warnungen wurden aktualisiert, um bestimmte HTML-Tags zu verbieten, die möglicherweise ein Sicherheitsrisiko darstellen. Nicht zulässige HTML-Tags und Attribute werden automatisch bereinigt. Beispielsweise ist
    • Benutzer können jetzt Warnungen für andere Benutzer abonnieren und müssen dabei kein Benachrichtigungsziel erstellen, was Administratorberechtigungen erfordern würde.
  • Downloads: Benutzer*innen können jetzt bis zu ca. 1 GB an Ergebnisdaten aus Databricks SQL im CSV- und TSV-Format herunterladen. Vorher waren nur 64.000 Zeilen möglich.
  • Visualisierungen
    • Sie können Visualisierungen jetzt direkt auf dem Dashboard bearbeiten. Klicken Sie im Bearbeitungsmodus auf das Dreipunktmenü, und wählen Sie Visualisierung bearbeiten aus, um mit der Bearbeitung der Visualisierung zu beginnen.
    • Beim Herunterladen von Ergebnissen, die einer Visualisierung mit Aggregationen zugeordnet sind, werden auch die heruntergeladenen Ergebnisse aggregiert. Die Option zum Herunterladen wird vom unteren Dreipunktmenü in das Dreipunktmenü verschoben, das der Registerkarte zugeordnet ist. Die heruntergeladenen Ergebnisse stammen aus der letzten Ausführung der Abfrage, die die Visualisierung erstellt hat.
  • SQL-Editor: Ergebnistabellen zeigen nun eine Meldung an, wenn Daten, die in der Browsertabelle angezeigt werden, auf 64.000 Zeilen beschränkt wurden. Der TSV- und CSV-Download ist dennoch für bis zu ca. 1 GB an Daten möglich.
  • Abfragefilter:
    • Abfragefilter wurden aktualisiert, damit sie dynamisch auf Client- oder Serverseite funktionieren, um die Leistung zu optimieren. Vorherige Abfragefilter (jetzt veraltet) haben nur clientseitig funktioniert. Benutzer*innen können bei Bedarf weiterhin Legacyfilter mit der ::-Syntax verwenden.
    • Die aktualisierten Filter sind einfacher: Benutzer*innen klicken auf die Schaltfläche + Filter hinzufügen und wählen eine Spalte aus einer Dropdownliste aus. Zuvor mussten Benutzer*innen den Abfragetext direkt ändern.
    • Relevante Werte werden hervorgehoben, damit übersichtlicher dargestellt wird, welche Auswahlen innerhalb eines Filters bei anderen Filterauswahlen zu Ergebnissen führen.
  • Abfrageverlauf: Die Abfragedetails im Abfrageverlauf zeigen jetzt die Abfragequelle an, die der Ursprung der ausgeführten Abfrage ist.

21. Juli 2022

  • Benachrichtigungen zur Freigabe: Benutzer*innen werden jetzt per E-Mail benachrichtigt, wenn ein Dashboard, eine Abfrage oder eine Warnung für sie freigegeben wird.
  • Erweiterter SQL-Editor über das neue eingebettete Editor-Toolkit
    • Livehervorhebung von Syntaxfehlern (z. B. falsches Schlüsselwort, Tabelle ist nicht vorhanden) mit Vorschlägen zum Beheben des Fehlers
    • Kontexthilfe: beim Daraufzeigen (z. B. vollständiger Tabellenname, detaillierter Funktionsbereich) und Inlinemeldungen für Ausführungsfehler (z. B. Hervorhebung von Zeilen mit Fehlern nach der Ausführung)
    • Intelligente Sortierung von Vorschlägen (z. B. automatische Parametervervollständigung, Rangfolgeformel, verbesserter Abgleich)

14. Juli 2022

  • Zusätzlich zu CSV-Dateien können jetzt TSV-Dateien mithilfe der Create Table-Benutzeroberfläche hochgeladen werden.
  • Databricks SQL bietet jetzt die Möglichkeit, Benutzer per E-Mail zu benachrichtigen, wenn ein Dashboard, eine Abfrage oder eine Warnung für sie freigegeben wird.
  • In Visualisierungstabellen werden neben den Ergebnissen jetzt optional Zeilennummern angezeigt.
  • Wenn Sie eine geografische Region für die Chloropleth-Visualisierung auswählen, erhalten Sie jetzt inline Hinweise zu akzeptierten Werten.

23. Juni 2022

  • Änderung des Namens „SQL-Endpunkt“: SQL-Endpunkte wurden in Databricks in SQL-Warehouses umbenannt, da sie mehr sind als nur ein API-Einstiegspunkt zum Ausführen von SQL-Befehlen. Ein SQL-Warehouse ist eine Berechnungsressource für alle Ihre Data-Warehousing-Anforderungen und ein integraler Bestandteil der Databricks-Plattform. Computeressourcen sind Infrastrukturressourcen, die Verarbeitungsfunktionen in der Cloud bereitstellen.
  • Für Choroplethenvisualisierungen wurden die Optionen „Schlüsselspalte“ und „Zielfeld“ im Visualisierungs-Editor in „Geografische Spalte“ und „Geografischer Typ“ umbenannt. Diese Umbenennung dient lediglich zum besseren Verständnis und hat keine Behavior Changes für neue oder bereits vorhandene Choroplethen zur Folge.
  • Die Option zur Begrenzung auf 1.000 Abfragen wurde von einem Kontrollkästchen im SQL-Abfrage-Editor in ein Kontrollkästchen für die Ausführungsschaltfläche verschoben.
  • Zwischengespeicherte Abfragen in der Tabelle „Abfrageverlauf“ werden jetzt mit einem Cachetag markiert.
  • Beim manuellen Aktualisieren eines Dashboards wird anstelle des Warehouse der jeweiligen Abfrage das Warehouse des Dashboards verwendet (sofern verfügbar).
  • Beim Aktualisieren einer Warnung wird immer das Warehouse der Warnung verwendet, unabhängig von der Einstellung „Als Viewer ausführen“ bzw. „Als Besitzer ausführen“.

9. Juni 2022

  • Wenn Sie den Mauszeiger über die Endpunktauswahl bewegen, wird der vollständige Endpunktname als QuickInfo angezeigt.
  • Wenn Sie im SQL Editor-Schemabrowser filtern, wird der Suchbegriff jetzt in den Suchergebnissen hervorgehoben.
  • Das Dialogfeld „Alle schließen“ im SQL-Editor zeigt jetzt eine Liste nicht gespeicherter Abfragen an.
  • Verwenden Sie diese neue Tastenkombination, um die letzte geschlossene Registerkarte im SQL-Editor erneut zu öffnen: <Cmd> + <Shift> + <Option> + T
  • Sie können nun Datenbeschriftungen zu Kombinationsdiagrammen hinzufügen.
  • Die Liste der Visualisierungsaggregationsvorgänge enthält jetzt die Varianz- sowie Standardabweichung.

26. Mai 2022

Verbesserungen bei der Erstellung:

  • Sie können nun beim Erstellen von Visualisierungen Aggregationen umgehen. Dies ist besonders nützlich, wenn Ihre Abfrage bereits eine Aggregation enthält. Wenn Ihre Abfrage beispielsweise SELECT AVG(price_per_sqft), isStudio, location GROUP BY location, isStudio lautet, musste der Diagramm-Editor zuvor explizit eine andere Aggregationsebene angeben.
  • Wenn Sie Dashboards erstellen, haben Sie jetzt folgende Möglichkeiten:
    • Duplizieren von Textfeld-Widgets
    • Erweitern der Größe des Textfeldbereichs
  • Die Standardaggregation für die Fehlerspalte beim Erstellen der Visualisierungen ist die Standardabweichung.

Fehlerbehebungen:

  • Bearbeitungsaktionen für Visualisierungen sind nur verfügbar, wenn sich das Dashboard im Bearbeitungsmodus befindet. Bearbeitungsaktionen sind nicht mehr als Aktionen im Ansichtsmodus verfügbar.
  • Wenn Sie eine neue Abfrage erstellen, wird sie auf einer Registerkarte direkt rechts neben der Registerkarte geöffnet, die den Fokus hat, anstatt am Ende der Liste.
  • Der geöffnete modale Abfrage zeigt, welche Abfrage bereits geöffnet ist, und sie bietet die Möglichkeit, den Fokus auf diese Abfrageregisterkarte zu verlegen.
  • Die Sankey & Sunburst-Diagramme behandeln 0 (null) nicht mehr als NULL.

19. Mai 2022

  • Problem behoben: Wenn der Fokus im SQL-Editor auf einer bestimmten Visualisierungsregisterkarte liegt und Sie einen Link für andere Benutzer freigeben, ist bei diesem Benutzer der Fokus im SQL-Editor derselbe, wenn er auf den freigegebenen Link klickt.
  • Verbesserungen:
    • Microsoft Teams wird nun als Benachrichtigungsziel unterstützt.
    • Die Parameter für Datumsbereich, Datums- und Zeitbereich und Datums- und Zeitbereich (mit Sekunden) unterstützen jetzt die Option zum Festlegen des ersten Tags der Woche, wobei Sonntag der Standardwert ist.

12. Mai 2022

  • Visualisierungen unterstützen jetzt die Zeitquantisierung direkt auf der Benutzeroberfläche. Sie können jetzt einfach zwischen jährlichen, monatlichen, täglichen oder stündlichen Intervallen Ihrer Daten wechseln, indem Sie einen Dropdownwert ändern, anstatt eine date_trunc()-Funktion im Abfragetext selbst hinzuzufügen oder zu ändern.
  • Dashboards sind jetzt standardmäßig farbkonsistent. Wenn dieselbe Reihe in mehreren Diagramme enthalten ist, wird die Datenreihe in allen Diagrammen immer in derselben Farbe angezeigt – ohne manuelle Konfiguration.

3\. Mai 2022

  • Beim Freigeben eines Dashboards für Benutzer*innen oder Gruppen haben Sie jetzt die Möglichkeit, auch alle Upstreamabfragen zu teilen, die von Visualisierungen und Parametern verwendet werden.
    • Wenn Sie nicht über die Berechtigung verfügen, einzelne oder mehrere der Upstreamabfragen freizugeben, erhalten Sie eine Warnung, dass nicht alle Abfragen freigegeben werden konnten.
    • Die Berechtigungen, die beim Freigeben eines Dashboards gewährt werden, können die Berechtigungen in Upstreamabfragen nicht außer Kraft setzen, eingrenzen oder erweitern. Wenn beispielsweise Benutzer oder Gruppen über die Berechtigung „Ausführen als Besitzer“ für das freigegebene Dashboard verfügen, aber für eine Upstreamabfrage nur über die Berechtigung „Ausführen als Leser“, gilt für diese Upstreamabfrage die Berechtigung „Ausführen als Leser“.

27. April 2022

  • Ihr Dashboardlayout wird jetzt beibehalten, wenn Sie nach Bedarf in eine PDF-Datei exportieren und geplante Abonnement-E-Mails generieren.

17. März 2022

  • Diagramme enthalten eine neue Option für kombinierte Visualisierungen. Damit können Sie Diagramme erstellen, die sowohl Balken als auch Linien enthalten.

10. März 2022

  • Mit dem Unity-Katalog (Vorschauversion) können Sie die Verwaltung und den Zugriff auf Ihre Daten auf Kontoebene verwalten. Sie können Metastores und Datenberechtigungen zentral verwalten und einen Metastore mehreren Arbeitsbereichen in Ihrem Konto zuweisen. Sie können Unity-Katalogdaten und -objekte mit dem Databricks SQL-Katalog-Explorer oder dem SQL-Editor verwalten und mit ihnen interagieren, und Sie können Unity-Katalogdaten in Dashboards und Visualisierungen verwenden. Siehe Was ist Unity Catalog?.

Hinweis

Unity Catalog erfordert, dass SQL-Endpunkte Version 2022.11 verwenden, die sich im Vorschau-Kanal befindet.

  • Das Delta Sharing-Feature (Vorschau) ermöglicht es Ihnen, schreibgeschützte Daten mit Empfängern außerhalb Ihrer Organisation zu teilen. Databricks SQL unterstützt das Abfragen von Delta Sharing-Daten und deren Verwendung in Visualisierungen und Dashboards.
  • Jedes Mal, wenn ein Dashboard manuell oder nach einem Zeitplan aktualisiert wird, werden alle Abfragen im Dashboard und Upstreamabfragen (einschließlich der von Parametern verwendeten Abfragen) aktualisiert. Beim Aktualisieren einer einzelnen Visualisierung werden alle Upstreamabfragen (einschließlich der von Parametern verwendeten Abfragen) aktualisiert.

3. März 2022

  • Die Kohortenvisualisierung wurde dahingehend aktualisiert, dass die Kohorten aus den Mindest- und Höchstwerten interpoliert werden, anstatt aus 0 und 100. Es ist jetzt viel einfacher, Kohorten innerhalb des tatsächlich verfügbaren Datenbereichs zu unterscheiden. Bisher wurden alle Zahlen, die nahe beieinander lagen, in der gleichen Farbe dargestellt. Jetzt ist es wahrscheinlicher, dass für nahe beieinander liegende Zahlen unterschiedliche Farben verwendet werden, da die Kohorte vom größten bis zum kleinsten Bereich unterteilt wird, um jede Reihe zu bilden.
  • Es ist einfacher zu erkennen, ob ein Dashboard-Abonnementzeitplan aktiv oder angehalten ist. Wenn Sie auf Abonnement klicken, erscheint die Meldung Dieser Zeitplan wurde angehalten, wenn der Zeitplan für das Dashboardabonnement pausiert ist. Wenn ein Dashboardabonnementplan angehalten wurde, können Sie das Dashboard abonnieren oder kündigen, aber die geplanten Momentaufnahmen werden nicht gesendet, und die Visualisierungen des Dashboards werden nicht aktualisiert.
  • Wenn Sie den Abfrageverlauf anzeigen, können Sie die Liste jetzt nach Dauer sortieren. Standardmäßig werden Abfragen nach Startzeit sortiert.

24. Februar 2022

  • Im Katalog-Explorer können Sie ab sofort die Berechtigungen anzeigen, über die Benutzer oder Gruppen für eine Tabelle, eine Sicht, ein Schema oder einen Katalog verfügen. Klicken Sie auf das Objekt und dann auf Berechtigungen, und verwenden Sie das neue Filterfeld.

17. Februar 2022

  • Visualisierungen sind jetzt noch intelligenter! Wenn eine Abfrage zu einer oder zwei Spalten führt, wird automatisch ein empfohlener Visualisierungstyp ausgewählt.
  • Sie können jetzt Histogramme erstellen, um die Häufigkeit des Auftretens einzelner Werte in einem Dataset zu veranschaulichen und zu verstehen, ob ein Dataset Werte enthält, die sich um eine kleine Anzahl von Bereichen herum gruppieren oder eher stärker gestreut vorliegen.
  • Sowohl in Abfrageverlauf als auch im Abfrageprofil können Sie die Abfragezeichenfolge und die Fehlermeldung einer fehlerhaften Abfrage nun vollständig anzeigen. Dies erleichtert die Analyse von Abfrageplänen und die Problembehandlung bei fehlerhaften Abfragen.
  • In Balken-, Linien-, Flächen-, Kreis- und Wärmebildvisualisierungen können Sie die Aggregation jetzt direkt in der Konfigurationsoberfläche der Visualisierung durchführen, ohne die Abfrage selbst ändern zu müssen. Bei der Nutzung dieser neuen Funktionen wird die Aggregation über das gesamte Dataset durchgeführt und ist nicht auf die ersten 64.000 Zeilen beschränkt. Wenn Sie eine Visualisierung bearbeiten, die vor diesem Release erstellt wurde, erhalten Sie die folgende Meldung: This visualization uses an old configuration. New visualizations support aggregating data directly within the editor.. Wenn Sie die neuen Funktionen nutzen möchten, müssen Sie die Visualisierung neu erstellen. Siehe Aktivieren der Aggregation in einer Visualisierung.

10. Februar 2022

  • Sie können ab sofort eine benutzerdefinierte Farbpalette für ein Dashboard erstellen. Alle Visualisierungen, die in diesem Dashboard dargestellt werden, verwenden die angegebene Palette. Die Festlegung einer benutzerdefinierten Palette hat keinen Einfluss darauf, wie eine Visualisierung in anderen Dashboards oder im SQL-Editor angezeigt wird.

    Sie können Hexadezimalwerte für eine Palette angeben oder Farben aus einer anderen Palette importieren, unabhängig davon, ob diese von Databricks bereitgestellt oder von einem Arbeitsbereichsadministrator erstellt wurde.

    Wenn eine Palette auf ein Dashboard angewendet wird, verwenden alle in diesem Dashboard angezeigten Visualisierungen standardmäßig die ausgewählte Farbpalette, auch wenn Sie beim Erstellen der Visualisierung benutzerdefinierte Farben konfigurieren. Informationen zum Außerkraftsetzen dieses Verhaltens finden Sie unter Anpassen der Farben für eine Visualisierung.

  • Arbeitsbereichsadministratoren können ab sofort mithilfe der Verwaltungskonsole eine benutzerdefinierte Farbpalette erstellen. Nachdem die benutzerdefinierte Farbpalette erstellt wurde, kann sie in neuen und vorhandenen Dashboards verwendet werden. Um eine benutzerdefinierte Farbpalette für ein Dashboard zu verwenden oder anzupassen, können Sie die Dashboardeinstellungen bearbeiten.

  • Wenn Sie einem Dashboard über das SQL-Menü Kebab-Menü eine Visualisierung hinzufügen, die Parameter verwendet, verwendet die Visualisierung jetzt standardmäßig Parameter auf Dashboardebene. Dies entspricht dem Verhalten, wenn Sie in einem Dashboard über die Schaltfläche Visualisierung hinzufügen ein Widget hinzufügen.

  • Wenn Sie den Abfrageverlauf anzeigen und die Liste nach einer Kombination von Parametern filtern, wird jetzt die Anzahl der übereinstimmenden Abfragen angezeigt.

  • In Visualisierungen wurde ein Problem behoben, bei dem der Bereich der Y-Achse nicht auf bestimmte Werte festgelegt werden konnte.

3. Februar 2022

  • Der SQL-Editor im Registerkartenformat ist jetzt standardmäßig für alle Benutzer aktiviert. Weitere Informationen bzw. Informationen zum Deaktivieren des Editors im Registerkartenformat finden Sie unter Bearbeiten mehrerer Abfragen.

  • Dashboard-E-Mail-Abonnenten erhalten jetzt ein Inline-Bild mit der Dashboardmomentaufnahme anstelle einer Anlage. Eine PDF-Datei der Momentaufnahme wird an die E-Mail angefügt.

  • Sie können ab sofort für ein Gleichgewicht zwischen Zuverlässigkeit und Kosten sorgen, indem Sie die Spot-Instanzrichtlinie für SQL-Endpunkte konfigurieren. Die Spot-Instanzrichtlinie bestimmt, ob Worker nur bedarfsgesteuerte Instanzen oder eine Kombination aus Bedarfs- und Spot-Instanzen verwenden. Bei Auswahl der Option Kostenoptimiert (Standardwert) werden überwiegend Spot-Instanzen und eine bedarfsgesteuerte Instanz verwendet. Bei Auswahl der Option Für Zuverlässigkeit optimiert werden nur bedarfsgesteuerte Instanzen verwendet. Bisher wurden für SQL-Endpunkte immer bedarfsgesteuerte Instanzen verwendet. Um dieses Verhalten beizubehalten, legen Sie die Spot-Instanzrichtlinie auf Für Zuverlässigkeit optimiert fest. Weitere Informationen finden Sie unter Konfigurieren der Spot-Instanzrichtlinie.

27. Januar 2022

  • Es wurden Verbesserungen an der Art und Weise vorgenommen, wie Sie das Profil einer Abfrage anzeigen, freigeben und importieren können. Siehe Abfrageprofil.

  • In der Detailvisualisierung können Sie nun Spalten umbenennen, genau wie in der Tabellenvisualisierung.

  • Sie können jetzt eine Registerkarte im SQL-Editor schließen, indem Sie mit der mittleren Maustaste darauf klicken.

  • Dem SQL-Editor im Registerkartenformat wurden die folgenden Tastenkombinationen hinzugefügt:

    • Schließen aller Registerkarten: Cmd+Option+UMSCHALT+A (macOS) / STRG+Option+UMSCHALT+A (Windows)
    • Schließen anderer Registerkarten: Cmd+Option+UMSCHALT+W (macOS) / STRG+Option+UMSCHALT+W (Windows)

    Diese Tastenkombinationen bieten eine Alternative zum Rechtsklick auf eine Registerkarte, um auf dieselben Aktionen zuzugreifen. Um alle Tastenkombinationen anzuzeigen, klicken Sie im Registerkartenmenü im SQL-Editor auf das Tastatursymbol Tastatursymbol.

20. Januar 2022

  • Die Standardformatierung für Integer- und Gleitkommadatentypen in Tabellen wurde aktualisiert und enthält nun keine Kommas mehr. Dies bedeutet, dass Werte wie 10002343 standardmäßig keine Kommas mehr enthalten. Um diese Typen so zu formatieren, dass sie mit Kommas angezeigt werden, klicken Sie auf Visualisierung bearbeiten, erweitern den Bereich für die Spalte und ändern das Format so ab, dass es ein Komma enthält.
  • Zur besseren Anpassung an die Renderingbeschränkungen von Browsern werden bei Visualisierungen jetzt maximal 10.000 Datenpunkte angezeigt. Bei einem Punktdiagramm werden beispielsweise maximal 10.000 Punkte angezeigt. Wenn die Anzahl von Datenpunkten begrenzt wurde, wird eine Warnung angezeigt.

13. Januar 2022

  • Es wurde ein Problem behoben, durch das die Schaltfläche Speichern im SQL-Editor mitunter deaktiviert war. Die Schaltfläche Speichern ist jetzt immer aktiviert und enthält ein Sternchen (*), wenn nicht gespeicherte Änderungen erkannt werden.

15. Dezember 2021

  • Databricks SQL ist allgemein verfügbar. Dies ist ein wichtiger Meilenstein bei der Bereitstellung der ersten Lakehouse-Plattform, die Daten, KI und BI-Workloads an einem Ort vereint. Mit der GA-Version können Sie von Databricks ein Höchstmaß an Stabilität, Unterstützung und Funktionalität auf Unternehmensniveau für geschäftskritische Workloads erwarten. Lesen Sie den Blog zur GA-Ankündigung, um mehr zu erfahren.
  • Warnungen werden jetzt unabhängig von Abfragen geplant. Wenn Sie eine neue Warnung und eine Abfrage erstellen, werden Sie aufgefordert, auch einen Zeitplan für die Warnung zu erstellen. Wenn bereits eine Warnung vorhanden war, wird der Zeitplan aus der ursprünglichen Abfrage dupliziert. Diese Änderung ermöglicht Ihnen außerdem das Festlegen von Warnungen für Abfragen vom Typ Als Besitzer ausführen und Als Viewer ausführen. Als Besitzer ausführen: Abfragen werden mit den Anmeldeinformationen des Abfragebesitzers nach dem festgelegten Warnungszeitplan ausgeführt. Als Viewer ausführen: Abfragen werden mit den Anmeldeinformationen des Warnungserstellers nach dem festgelegten Warnungszeitplan ausgeführt. Siehe Was sind Databricks SQL-Warnungen? und Planen Sie eine Abfrage.
  • Sie können Parameter jetzt sowohl im SQL-Editor als auch in Dashboards neu anordnen.
  • Die Dokumentation zum Erstellen von Wärmebildvisualisierungen wurde erweitert. Siehe Wärmebildoptionen.

9. Dezember 2021

  • Wenn Sie eine Tabellenvisualisierung erstellen, können Sie nun die Schriftfarbe für eine Spalte auf einen statischen Wert oder auf einen Wertebereich festlegen, der auf den Feldwerten der Spalte basiert. Der Literalwert wird mit dem Schwellenwert verglichen. Um beispielsweise Ergebnisse farblich hervorzuheben, deren Werte 500000 überschreiten, legen Sie den Schwellenwert > 500000 anstelle von > 500,000 fest. Siehe Bedingtes Formatieren von Spaltenfarben.
  • Symbole im Schemabrowser des SQL-Editors im Registerkartenformat ermöglichen ab sofort die Unterscheidung zwischen Tabellen und Sichten.

1. Dezember 2021

  • Sie können jetzt SQL-Konfigurationsparameter auf Arbeitsbereichsebene anwenden. Diese Parameter werden automatisch auf alle vorhandenen und neuen SQL-Endpunkte im Arbeitsbereich angewendet. Siehe Konfigurieren von SQL-Parametern.

18. November 2021

  • Wenn Sie den Verlauf einer Abfrage anzeigen, können Sie Abfragen jetzt nach dem Dienstprinzipal filtern, der sie ausgeführt hat. Siehe Anzeigen des Abfrageverlaufs.

  • Sie können den SQL-Editor ab sofort über eine Verknüpfung in der Seitenleiste öffnen. Klicken Sie auf SQL-Editor, um den SQL-Editor zu öffnen.

  • Wenn Sie über die Berechtigung zum Erstellen von Data Science und Engineering-Clustern verfügen, können Sie ab sofort SQL-Endpunkte erstellen, indem Sie in der Seitenleiste auf Erstellen und dann auf SQL-Endpunkt klicken.

  • Administratoren können jetzt den Besitz einer Abfrage, eines Dashboards oder einer Warnung über die Benutzeroberfläche an einen anderen Benutzer übertragen. Thema

4\. November 2021

  • Für Kartenvisualisierungen (Chloropleth) wurde die maximale Anzahl von Farbverlaufsschritten für Farben in der Legende von 11 auf 20 erhöht. Der Standardwert umfasst 5 Farbverlaufsschritte einschließlich Farbe für Mindestwert und Farbe für Höchstwert.
  • Der SQL-Editor im Registerkartenformat unterstützt ab sofort die Massenverwaltung von Registerkarten. Wenn Sie mit der rechten Maustaste auf eine Registerkarte klicken, werden die Optionen Andere schließen, Links schließen, Rechts schließen, und Alles schließen angezeigt. Hinweis: Wenn Sie mit der rechten Maustaste auf die erste oder letzte Registerkarte klicken, werden die Optionen Links schließen bzw. Rechts schließen nicht angezeigt.

28. Oktober 2021

  • Wenn Sie eine Tabelle im Katalog-Explorer anzeigen, haben Sie zwei Möglichkeiten, die Interaktion mit der Tabelle zu vereinfachen:
    • Klicken Sie auf Erstellen > Abfrage, um eine Abfrage zu erstellen, die alle Spalten auswählt und die ersten 1.000 Zeilen zurückgibt.
    • Klicken Sie auf Erstellen > Schnelldashboard, um eine Konfigurationsseite zu öffnen, auf der Sie relevante Spalten auswählen und ein Dashboard sowie unterstützende Abfragen erstellen können, die anhand dieser Spalten einige grundlegende Informationen bereitstellen und Parameter auf Dashboardebene sowie andere Funktionen anzeigen.

19. Oktober 2021

  • Für den Editor im Registerkartenformat sind jetzt neue Tastenkombinationen verfügbar:
    • Neue Registerkarte öffnen
      • Windows: Cmd+Alt+T
      • Mac: Cmd+Option+T
    • Aktuelle Registerkarte schließen
      • Windows: Cmd+Alt+W
      • Mac: Cmd+Option+W
    • Abfragedialogfeld öffnen
      • Windows: Cmd+Alt+O
      • Mac: Cmd+Option+O

23. September 2021

  • Sie können jetzt ein neues Dashboard erstellen, indem Sie ein vorhandenes Dashboard klonen, sofern Sie über die Berechtigungen CAN RUN (Kann ausführen), CAN EDIT (Kann bearbeiten) und CAN MANAGE (Kann verwalten) für das Dashboard und alle Upstreamabfragen verfügen. Weitere Informationen finden Sie unter Klonen eines Legacy-Dashboards.
  • Sie können jetzt GROUP BY in einer Visualisierung mit mehreren Spalten der y-Achse verwenden. Weitere Informationen finden Sie unter Punktdiagramm.
  • Sie können nun mithilfe von {{ @@yPercent}} Datenbezeichnungen in einem nicht normalisierten gestapelten Balkendiagramm formatieren. Weitere Informationen finden Sie unter Balkendiagramm.
  • Wenn Sie die SAML-Authentifizierung verwenden und Ihre SAML-Anmeldeinformationen innerhalb weniger Minuten ablaufen, werden Sie jetzt proaktiv aufgefordert, sich erneut zu anmelden, bevor Sie eine Abfrage ausführen oder ein Dashboard aktualisieren. Dadurch wird eine Unterbrechung aufgrund von Anmeldeinformationen verhindert, die während der Abfrageausführung ablaufen.

20. September 2021

  • Sie können jetzt den Besitz von Dashboards, Abfragen und Warnungen mithilfe der Berechtigungs-REST-API übertragen. Weitere Informationen finden Sie unter Abfragen von Zugriffssteuerungslisten.

16. September 2021

  • In Abfrageergebnissen werden BIGINT-Ergebnisse jetzt als Zeichenfolgen serialisiert, wenn sie größer als 9007199254740991 sind. Dadurch wird ein Problem behoben, aufgrund dessen BIGINT-Ergebnisse in Abfrageergebnissen ggf. abgeschnitten wurden. Andere ganzzahlige Ergebnisse werden weiterhin als Zahlen serialisiert. Die Zahlenformatierung für Achsenbezeichnungen und QuickInfos gilt nicht für BIGINT-Ergebnisse, die als Zeichenfolgen serialisiert werden. Weitere Informationen zu Datentypen in Databricks SQL finden Sie unter Typ BIGINT.

7\. September 2021

Databricks wird die folgenden Änderungen im Laufe einer Woche einführen. Ihr Arbeitsbereich ist möglicherweise erst nach dem 7. September für diese Änderungen aktiviert.

  • Databricks SQL ist jetzt in Public Preview und für alle Benutzer in neuen Arbeitsbereichen aktiviert.

    Hinweis

    Wenn Ihr Arbeitsbereich während der öffentlichen Vorschau (d. h. vor der Woche ab dem 7. September 2021) für Databricks SQL aktiviert wurde, behalten Benutzer die vor diesem Datum zugewiesene Berechtigung – sofern Sie diese nicht ändern. Anders ausgedrückt: Wenn ein Benutzer während der öffentlichen Vorschau keinen Zugriff auf Databricks SQL hatte, verfügt er auch jetzt nicht über Zugriff darauf, es sei denn, ihm wird durch einen Administrator Zugriff erteilt.

  • Administratoren können verwalten, welche Benutzer Zugriff auf Databricks SQL haben, indem sie Benutzern oder Gruppen die Berechtigung Databricks SQL-Zugriff (databricks-sql-access in der API) zuweisen. Neue Benutzer verfügen standardmäßig über diese Berechtigung.

    Administrator*innen können einen Benutzer oder eine Gruppe darauf beschränken, nur auf Databricks SQL zuzugreifen, und ihnen den Zugriff auf Data Science und Engineering oder Databricks Mosaic AI verwehren, indem sie dem Benutzer oder der Gruppe die Berechtigung Arbeitsbereichszugriff (workspace-access in der API) entziehen. Neue Benutzer verfügen standardmäßig über diese Berechtigung.

    Wichtig

    Um sich anzumelden und auf Azure Databricks zuzugreifen, muss ein Benutzer entweder über die Berechtigung Databricks SQL-Zugriff oder Arbeitsbereichszugriff (oder beide) verfügen.

  • Ein kleiner klassischer SQL-Endpunkt mit dem Namen Startendpunkt ist in allen Arbeitsbereichen vorkonfiguriert, sodass Sie sofort mit dem Erstellen von Dashboards, Visualisierungen und Abfragen beginnen können. Zur Verarbeitung komplexerer Workloads können Sie dessen Größe (zur Reduzierung der Wartezeit) oder die Anzahl der zugrunde liegenden Cluster (zur Bewältigung von mehr gleichzeitigen Benutzern) problemlos erhöhen. Um die Kosten im Griff zu behalten, ist der Startendpunkt so konfiguriert, dass er nach 120 Minuten im Leerlauf beendet wird.

  • Damit Sie schnell loslegen können, gibt es für Administratoren und Benutzer eine neue Onboardinghilfe. Der Onboardingbereich ist standardmäßig sichtbar, und Sie können auf der Randleiste immer sehen, wie viele Onboardingaufgaben noch übrig sind. Klicken Sie auf die verbleibenden Aufgaben, um den Onboardingbereich erneut zu öffnen.

  • Der Einstieg in die Nutzung von Databricks SQL erfolgt schnell mit zwei umfangreichen Datensätzen in einem schreibgeschützten Katalog namens SAMPLES, der über alle Arbeitsbereiche zugänglich ist. Wenn Sie sich mit Databricks SQL vertraut machen, können Sie diese Schemas verwenden, um Abfragen, Visualisierungen und Dashboards zu erstellen. Eine Konfiguration ist nicht erforderlich, und alle Benutzer haben Zugriff auf diese Schemas.

    • Das nyctaxi-Schema enthält Daten zu Taxifahrten in der trips-Tabelle.
    • Das tpch-Schema enthält Daten zum Einzelhandelsumsatz und zur Lieferkette in den folgenden Tabellen:
      • customer
      • lineitem
      • nation
      • orders
      • part
      • partsupp
      • region
      • supplier

    Klicken Sie im Onboardingbereich auf Ausführen der ersten Abfrage, um eine neue Abfrage des nyctaxi-Schemas zu generieren.

  • Um mehr über die Visualisierung von Daten in Databricks SQL ohne Konfiguration zu erfahren, können Sie Dashboards aus dem Dashboard-Beispielkatalog importieren. Diese Dashboards werden von den Datasets im Katalog SAMPLES unterstützt.

    Klicken Sie zum Anzeigen des Dashboard-Beispielkatalogs im Onboardingbereich auf Beispieldashboard importieren.

  • Sie können jetzt native SQL-Funktionen mit den Befehlen CREATE FUNCTION und DROP FUNCTION erstellen und löschen.

2\. September 2021

  • Benutzer mit der Berechtigung CAN EDIT für ein Dashboard können nun den Aktualisierungszeitplan und die Abonnementliste des Dashboards verwalten. Zuvor war die Berechtigung CAN MANAGE erforderlich. Weitere Informationen finden Sie unter Automatisches Aktualisieren eines Dashboards.

  • Standardmäßig wird die Größe von Visualisierungen nicht mehr dynamisch basierend auf der Anzahl der zurückgegebenen Ergebnisse geändert, sondern die Höhe wird unabhängig von der Anzahl der Ergebnisse beibehalten. Um zum vorherigen Verhalten zurückzukehren und eine Visualisierung für die dynamische Größenänderung zu konfigurieren, aktivieren Sie auf dem Dashboard in den Visualisierungseinstellungen die Option Dynamically resize panel height (Bereichshöhe dynamisch ändern). Weitere Informationen finden Sie unter Tabellenoptionen.

  • Wenn Sie Zugriff auf mehrere Arbeitsbereiche im gleichen Konto haben, können Sie in Databricks SQL zwischen ihnen wechseln. Klicken Sie auf das Kontosymbol in der unteren linken Ecke Ihres Azure Databricks-Arbeitsbereichs, und wählen Sie dann einen Arbeitsbereich aus, zu dem Sie wechseln möchten.

12. August 2021

  • Ein Administrator kann jetzt die Abfrage eines anderen Benutzers während ihrer Ausführung beenden. Weitere Informationen finden Sie unter Beenden einer ausgeführten Abfrage.

05. August 2021

  • Verbesserte Formatierung von EXPLAIN-Ergebnissen
    • Explain-Ergebnisse sind einfacher zu lesen.
    • Formatiert in Festbreitenschriftart ohne Zeilenumbruch

29. Juli 2021

  • Das Jonglieren mehrerer Abfragen wurde durch die Unterstützung mehrerer Registerkarten im Abfrage-Editor vereinfacht. Informationen zur Verwendung des Editors im Registerkartenformat finden Sie unter Bearbeiten mehrerer Abfragen.

08. Juli 2021

  • Visualisierungswidgets auf Dashboards verfügen jetzt über Titel und Beschreibungen, damit Sie den Titel und die Beschreibung von Visualisierungen, die auf mehreren Dashboards verwendet werden, an das jeweilige Dashboard anpassen können.
  • Die Seitenleiste wurde aktualisiert, um die Transparenz und die Navigation zu verbessern:
    • Warehouses sind jetzt SQL-Endpunkte, und der Verlauf wurde in Abfrageverlauf umbenannt.
    • Die Kontoeinstellungen (früher Benutzer) wurden in SQL-Kontosymbol Konto verschoben. Wenn Sie Konto auswählen, können Sie den Azure Databricks-Arbeitsbereich ändern und sich abmelden.
    • Die Benutzereinstellungen wurden in die Symbol für Benutzereinstellungen Einstellungen verschoben und in Einstellungen und SQL-Administratorkonsole unterteilt. Die SQL-Administratorkonsole ist nur für Administratoren sichtbar.
    • Das Hilfesymbol wurde in Hilfesymbol Hilfe geändert.

01. Juli 2021

  • Mit dem neuen Katalog-Explorer können Sie Berechtigungen für Datenbanken und Tabellen auf einfache Weise erkunden und verwalten. Benutzer können sich Schemadetails, eine Vorschau von Beispieldaten und Tabellendetails und -eigenschaften anzeigen lassen. Administratoren können Besitzer von Datenobjekten anzeigen und ändern, und Besitzer von Datenobjekten können Berechtigungen erteilen und widerrufen. Weitere Informationen finden Sie unter Was ist der Katalog-Explorer?.
  • Y-Achsen in horizontalen Diagrammen wurden aktualisiert, um die gleiche Reihenfolge wie in Tabellen widerzuspiegeln. Wenn Sie zuvor die umgekehrte Reihenfolge ausgewählt haben, können Sie mit dem Umschalter Umgekehrte Reihenfolge auf der Registerkarte „Y-Achse“ die neue Reihenfolge umkehren.

23. Juni 2021

  • Einfaches Konfigurieren von SQL-Endpunkten mit Dienstprinzipalen. Es gibt jetzt ein Steuerelement, mit dem Sie einen Dienstprinzipal in der Einstellung für globale SQL-Endpunkte konfigurieren können. Informationen finden Sie unter Konfigurieren eines Dienstprinzipals.
  • Temporäre Ansichten werden jetzt unterstützt.

17. Juni 2021

  • Photon, die neue vektorisierte Ausführungs-Engine von Databricks, ist jetzt standardmäßig für neu erstellte SQL-Endpunkte (Benutzeroberfläche und REST-API) aktiviert. Photon beschleunigt transparent:
    • Schreibvorgänge in Parquet- und Delta-Tabellen
    • Zahlreiche SQL-Abfragen Informationen finden Sie unter Einschränkungen.
  • Einfaches Verwalten von Benutzern und Gruppen mit den Befehlen CREATE GROUP, DROP GROUP, ALTER GROUP, SHOW GROUPS und SHOW USERS. Weitere Informationen finden Sie unter Sicherheitsanweisungen und Anweisungen anzeigen.
  • Der Schemabrowser des Abfrage-Editors ist bei Datenbanken mit mehr als 100 Tabellen schneller. Bei solchen Schemas lädt der Schemabrowser nicht automatisch alle Spalten. Die Liste der Tabellen wird weiterhin wie gewohnt angezeigt, aber Spalten werden nur geladen, wenn Sie auf eine Tabelle klicken. Diese Änderung wirkt sich auf die automatische Abfragevervollständigung im Abfrage-Editor aus, da dieser auf diese Informationen angewiesen ist, um Vorschläge anzuzeigen. Diese Vorschläge sind erst verfügbar, wenn Sie eine Tabelle erweitern und deren Spalten laden.

03. Juni 2021

  • Administratoren von neu aktivierten Azure Databricks Arbeitsbereichen erhalten jetzt standardmäßig die Berechtigung für Databricks SQL und müssen sich die Databricks SQL-Zugriffsberechtigung nicht mehr selbst über die Verwaltungskonsole erteilen.
  • Photon befindet sich jetzt in der öffentlichen Vorschau und ist standardmäßig für neue SQL-Endpunkteaktiviert.
  • Der Lastenausgleich mit Multi-Clustern befindet sich jetzt in der öffentlichen Vorschau.
  • Sie können jetzt die Zusammenarbeit in Dashboards und Abfragen mit anderen Mitgliedern Ihres Unternehmens ermöglichen, indem Sie die Berechtigung CAN EDIT verwenden. Siehe Zugriffssteuerungslisten.

26. Mai 2021

  • SQL Analytics wurde in Databricks SQL umbenannt. Diese Änderung hat die folgenden kundenseitigen Auswirkungen:
    • Verweise auf der Web-Benutzeroberfläche wurden aktualisiert.

    • Die Berechtigung zum Gewähren des Zugriffs auf Databricks SQL wurde umbenannt:

      • Benutzeroberfläche: Databricks SQL-Zugriff (zuvor SQL Analytics-Zugriff)
      • SCIM-API: databricks-sql-access (bisher sql-analytics-access)

      Benutzer, Gruppen und Dienstprinzipale mit der vorherigen Berechtigung wurden zur neuen Berechtigung migriert.

    • Tags für Überwachungsprotokollereignisse im Zusammenhang mit Databricks SQL wurden geändert:

      • Das Präfix für Databricks SQL-Ereignisse ist jetzt databrickssql.
      • changeSqlAnalyticsAcl ist jetzt changeDatabricksSqlAcl.
  • Dashboardupdates
    • Der Dateiname für den Dashboard-Export wurde aktualisiert und besteht nun aus dem Namen des Dashboards + Zeitstempel, anstatt aus einer UUID.
    • Der Grenzwert für Exportdatensätze wurde von 22k auf 64k erhöht.

20. Mai 2021

  • Sie können jetzt Ihren eigenen Schlüssel aus Azure Key Vault verwenden, um die Databricks SQL-Abfragen und den Abfrageverlauf zu verschlüsseln, die in Azure Databricks gespeichert sind. Wenn Sie bereits Ihren eigenen Schlüssel für einen Arbeitsbereich konfiguriert haben, um Daten für verwaltete Dienste (Notebooks und Geheimnisse) zu verschlüsseln, ist keine weitere Aktion erforderlich. Derselbe kundenverwaltete Schlüssel für verwaltete Dienste verschlüsselt jetzt auch die Databricks SQL-Abfragen und den Abfrageverlauf. Siehe Kundenseitig verwaltete Schlüssel für verwaltete Dienste. Diese Änderung betrifft nur neue Daten, die im Ruhezustand gespeichert sind. Databricks SQL-Abfragen und Abfrageverläufe, die vor dem heutigen Tag gespeichert wurden, werden nicht garantiert mit diesem Schlüssel verschlüsselt.

    Databricks SQL-Abfrageergebnisse werden in Ihrer Azure Blob Storage-Stamminstanz gespeichert, die Azure Databricks während der Einrichtung des Arbeitsbereichs erstellt hat. Sie werden nicht durch Ihren Schlüssel für verwaltete Dienste verschlüsselt. Sie können jedoch Ihren eigenen Schlüssel verwenden, um sie zu verschlüsseln. Weitere Informationen finden Sie unter Kundenseitig verwaltete Schlüssel für den DBFS-Stamm.

    Dieses Feature ist im Premium-Plan verfügbar.

  • Auf der Registerkarte Bisherige Ausführungen wird nun die relative Zeit angezeigt.

13. Mai 2021

  • Databricks SQL versucht nicht mehr, Spaltentypen zu erraten. Zuvor wurde eine Spalte mit dem Format xxxx-yy-dd automatisch als Datum behandelt, auch wenn es sich um einen Identifikationscode handelte. Diese Spalte wird jetzt nicht mehr automatisch als Datum behandelt. Soll sie als Datum behandelt werden, müssen Sie dies in der Abfrage angeben. Diese Änderung kann dazu führen, dass einige Visualisierungen, die auf dem vorherigen Verhalten beruhten, nicht mehr funktionieren. In diesem Release können Sie die Option Symbol für Benutzereinstellungen>Einstellungen>Abwärtskompatibilität ändern, um wieder das vorherige Verhalten zu verwenden. In einer zukünftigen Version wird diese Funktion entfernt.

  • Der Abfrage-Editor verfügt jetzt über eine Abfragestatusanzeige. Zustandsänderungen werden jetzt in einer Statusanzeige angezeigt, die laufend aktualisiert wird.

    Statusanzeige

6\. Mai 2021

  • Sie können nun den Inhalt des Dashboards als PDF-Datei herunterladen. Siehe Als PDF-Datei herunterladen

  • Ein Administratorbenutzer hat jetzt Anzeigezugriff auf alle Abfragen und Dashboards. In dieser Ansicht kann ein Administrator alle Abfragen oder Dashboards anzeigen und löschen. Allerdings können Administratoren die Abfrage oder das Dashboard nicht bearbeiten, wenn die Abfrage bzw. das Dashboard nicht für sie freigegeben wurde. Weitere Informationen finden Sie unter Abfrageadministratoransicht sowie unter Legacy-Dashboardadministratoransicht.

  • Die Option, die Endpunktparallelität mit einem Lastenausgleich für mehrere Cluster zu erhöhen, ist jetzt für alle Konten verfügbar. Sie können Endpunkte erstellen, die automatisch zwischen der angegebenen minimalen und maximalen Clusteranzahl skaliert werden. Überladene Endpunkte werden hochskaliert, und unterlastete Endpunkte werden herunterskaliert.

29. April 2021

22. April 2021

  • Ein Problem wurde behoben, aufgrund dessen nicht auf Endpunkte zugegriffen werden konnte und Endpunkte wegen eines internen Fehlers gelöscht zu sein schienen.

16. April 2021

Databricks SQL behält Kompatibilität mit Apache Spark SQL-Semantik bei. Dieses Release aktualisiert die Semantik, um sie an die von Apache Spark 3.1 anzupassen. Bisher war Databricks SQL an der Apache Spark 3.0-Semantik ausgerichtet.

  • Statistische Aggregationsfunktionen, einschließlich std, stddev, stddev_samp, variance, var_samp, skewness, kurtosis, covar_samp, und corr geben NULL anstelle von Double.NaN zurück, wenn DivideByZero während der Ausdrucksauswertung auftritt, z. B. wenn stddev_samp auf einen Einzelelementsatz angewendet wird. Vor diesem Release wurde Double.NaN zurückgegeben.
  • grouping_id() gibt lange Werte zurück. Vor diesem Release hat diese Funktion int-Werte zurückgegeben.
  • Die erläuternden Ergebnisse des Abfrageplans sind jetzt formatiert.
  • from_unixtime, unix_timestamp,to_unix_timestamp, to_timestamp und to_date schlagen fehl, wenn das angegebene datetime-Muster ungültig ist. Vor diesem Release wurde NULL zurückgegeben.
  • Die Parquet-, ORC-, Avro- und JSON-Datenquellen geben die Ausnahme org.apache.spark.sql.AnalysisException aus: „Doppelte Spalte(n) im Datenschema beim Lesen gefunden, wenn doppelte Namen in Top-Level-Spalten sowie in geschachtelten Strukturen erkannt werden.“
  • Strukturen und Zuordnungen werden von {}-Klammern umschlossen, wenn sie in Zeichenfolgen umgewandelt werden. Beispielsweise verwenden die show()-Aktion und der CAST-Ausdruck solche Klammern. Vor diesem Release wurden die d-Klammern für den gleichen Zweck verwendet.
  • NULL-Elemente von Strukturen, Arrays und Zuordnungen werden in „NULL“ konvertiert, wenn sie in Zeichenfolgen umgewandelt werden. Vor diesem Release wurden NULL-Elemente in leere Zeichenfolgen konvertiert.
  • Die Summe der Spaltenüberläufe des Dezimaltyps gibt NULL zurück. Vor diesem Release gab die Summe der Spalte vom Typ „dezimal“ möglicherweise NULL oder ein falsches Ergebnis zurück oder schlug sogar zur Laufzeit fehl (abhängig von der tatsächlichen Ausführung des Abfrageplans).
  • IllegalArgumentException wird für die unvollständigen Intervallliterale zurückgegeben, z. B. INTERVAL '1', INTERVAL '1 DAY 2', die ungültig sind. Vor diesem Release führten diese Literale zu NULL-Werten.
  • Das Laden und Speichern von Zeitstempeln aus und in Parquet-Dateien schlägt fehl, wenn die Zeitstempel vor 1900-01-01 00:00:00Z liegen und als Typ INT96 geladen (gespeichert) werden. Vor diesem Release schlugen die Aktionen nicht fehl, konnten aber aufgrund der Umbasierung vom/zum Julianischen zum/vom proleptischen Gregorianischen Kalender zu einer Verschiebung der Eingabezeitstempel führen.
  • Die Funktionen schema_of_json und schema_of_csv geben das Schema im SQL-Format zurück, in dem Feldnamen in Anführungszeichen stehen. Vor diesem Release gab die Funktion eine Katalogzeichenfolge ohne Anführungszeichen im Feld und in Kleinbuchstaben zurück.
  • Die Typen CHAR, CHARACTER und VARCHAR werden im Tabellenschema unterstützt. Die Tabellenüberprüfung und -einfügung beachtet die char/varchar-Semantik. Wenn char/varchar an anderen Stellen als dem Tabellenschema verwendet wird, wird eine Ausnahme ausgelöst (CAST ist eine Ausnahme, die char/varchar einfach wie zuvor als Zeichenfolge behandelt).
  • Die folgenden Ausnahmen werden für Tabellen aus dem externen Hive-Katalog ausgelöst:
    • ALTER TABLE .. ADD PARTITION löst PartitionsAlreadyExistException aus, wenn bereits eine neue Partition vorhanden ist.
    • ALTER TABLE .. DROP PARTITION löst NoSuchPartitionsException für nicht vorhandene Partitionen aus.

13. April 2021

  • Verbesserter Abfragedurchsatz mit SQL-Endpunktwarteschlangen. An einen SQL-Endpunkt übermittelte Abfragen werden jetzt in die Warteschlange eingereiht, wenn der Endpunkt bereits mit ausgeführten Abfragen überlastet ist. Dadurch wird der Abfragedurchsatz verbessert, indem der Endpunkt nicht mit Anforderungen überladen wird. Sie können die verbesserte Leistung auf dem Bildschirm für die Endpunktüberwachung anzeigen.

1\. April 2021

  • Ermitteln Sie im Abfrageverlauf schnell den Zeitaufwand für Kompilierung, Ausführung und Ergebnisabruf für eine Abfrage. Siehe Abfrageprofil. Diese Informationen waren zuvor nur verfügbar, indem Sie auf eine Abfrage geklickt und die Registerkarte „Ausführungsdetails“ geöffnet haben.
  • SQL-Endpunkte werden nicht mehr über die maximal angegebenen Cluster hinaus skaliert. Alle einem SQL-Endpunkt zugeordneten Cluster werden nach 24 Stunden recycelt, daher kann ein kurzes Zeitfenster entstehen, in dem ein zusätzlicher Cluster vorhanden ist.

18. März 2021

  • AutoVervollständigen im Abfrage-Editor unterstützt jetzt die Databricks-SQL-Syntax und ist kontext- und aliasabhängig. Informationen finden Sie unter Erstellen einer Abfrage.
  • Bei JDBC- und ODBC-Anforderungen treten nach dem Timeout der Sitzung auf dem Server keine Fehler vom Typ „Ungültige Sitzung“ mehr auf. BI-Clients können jetzt nahtlos wieder hergestellt werden, wenn Sitzungstimeouts auftreten.

11. März 2021

  • Administratoren und Benutzer in Arbeitsbereichen, die neu für SQL Analytics aktiviert wurden, haben nicht mehr automatisch Zugriff auf Databricks SQL. Um den Zugriff auf die Databricks SQL zu ermöglichen, muss der Administrator folgende Schritte ausführen:
    1. Wechseln Sie zur Seite Administratoreinstellungen.
    2. Klicken Sie auf die Registerkarte Benutzer .
    3. Klicken Sie in der Zeile für Ihr Konto auf das Kontrollkästchen für den Zugriff auf Databricks SQL.
    4. Klicken Sie auf Confirm (Bestätigen).
    5. Wiederholen Sie die Schritte 3 und 4, um Benutzern Zugriff auf Databricks SQL zu gewähren oder Zugriff auf Gruppen zu gewähren.
  • Sie können ganz einfach Abfragen, Dashboards und Warnungen erstellen, indem Sie oben in der Randleiste Neues Symbol Neu > [Abfrage | Dashboard | Warnung] auswählen.
  • Der Abfrage-Editor speichert nun Entwürfe, und Sie können eine gespeicherte Abfrage wiederherstellen. Siehe Schreiben von Abfragen und Untersuchen von Daten im SQL-Editor.
  • Externe Datenquellen können nicht mehr erstellt werden.
  • Die Zuverlässigkeit des Überwachungsdiagramms für den SQL-Endpunkt wurde verbessert. Das Diagramm zeigt nicht mehr zeitweise falsche Fehlermeldungen an.

04. März 2021

  • Die Dokumentation zur API für Abfragen, Dashboards und Warnungen ist nun verfügbar. Weitere Informationen finden Sie in der Referenz zur Databricks-REST-API.

  • Geplante Dashboardaktualisierungen werden nun immer ausgeführt. Die Aktualisierungen werden in der Webanwendung ausgeführt, sodass das Dashboard nicht mehr in einem Browser geöffnet bleiben muss. Siehe Automatisches Aktualisieren eines Dashboards.

  • Für mithilfe der SQL-Warehouse-API erstellte neue SQL-Endpunkte ist jetzt das automatische Beenden mit einem Standardtimeout von zwei Stunden aktiviert.

  • Tableau Online-Benutzer können jetzt Verbindungen mit SQL-Endpunkten herstellen. Weitere Informationen finden Sie im neuen Schnellstart zu Tableau Online.

26. Februar 2021

Der neue Power BI-Connector für Azure Databricks, der im September 2020 als öffentliche Vorschauversion veröffentlicht wurde, ist nun allgemein verfügbar. Sie bietet:

  • Einfache Verbindungskonfiguration: Der neue Power BI-Connector für Azure Databricks ist in Power BI integriert, und Sie konfigurieren ihn mit wenigen Klicks über ein einfaches Dialogfeld.
  • Authentifizierung basierend auf Microsoft Entra ID-Anmeldeinformationen: Es ist nicht mehr erforderlich, dass Administrator*innen persönliche Zugriffstoken konfigurieren.
  • Schnellere Importe und optimierte Metadatenaufrufe dank des neuen Azure Databricks-ODBC-Treibers, der bedeutende Leistungsverbesserungen beinhaltet
  • Der Zugriff auf Azure Databricks-Daten über Power BI berücksichtigt die Azure Databricks-Tabellenzugriffssteuerung und Azure-Speicherkontoberechtigungen, die Ihrer Microsoft Entra ID-Identität zugeordnet sind.

Weitere Informationen finden Sie unter Verbinden von Power BI mit Azure Databricks.

25. Februar 2021

  • Das Festlegen von Berechtigungen für einen SQL-Endpunkt geht nun schneller. Dieser Schritt wird direkt nach dem Erstellen eines neuen SQL-Endpunkts ausgeführt und ist bei der Bearbeitung eines vorhandenen Endpunkts problemlos zugänglich. Siehe Herstellen einer Verbindung mit einem SQL-Warehouse und Verwalten eines SQL-Warehouse.
  • Zum Wiederverwenden der Visualisierungseinstellungen können Sie jetzt eine Visualisierung duplizieren. Siehe Klonen einer Visualisierung.
  • Abfrageergebnisse werden jetzt statt im Azure Databricks-Konto in Ihrem Konto gespeichert.
  • Um die Offenlegung von Informationen durch Auflisten aller definierten Berechtigungen für ein Objekt zu verhindern, muss für die Ausführung von SHOW GRANTS [<user>] <object> Folgendes zutreffen:
    • Ein Databricks SQL-Administrator oder der Besitzer von <object>.
    • Sie müssen der in [<user>] angegebene Benutzer sein.

7. Januar 2021

  • Um die Ausgaben für Endpunkte im Leerlauf zu reduzieren, ist für neue SQL-Endpunkte jetzt automatisches Beenden mit einem Standardtimeout von zwei Stunden aktiviert. Nach Erreichen des Timeouts wird der Endpunkt beendet. Sie können den Timeoutzeitraum bearbeiten oder automatisches Beenden jederzeit deaktivieren.
  • Mit Ausnahme des Abfrageparameters vom Typ TEXT werden Abfrageparametern keine Anführungszeichen mehr hinzugefügt. Wenn Sie Abfrageparameter vom Typ Dropdown List, Query Based Dropdown List oder Date verwendet haben, müssen Sie Anführungszeichen hinzufügen, damit die Abfrage funktioniert. Wenn Sie beispielsweise die Abfrage SELECT {{ d }} verwenden, muss diese nun SELECT '{{ d }}' lauten.

18. November 2020

Das Databricks-Team freut sich, die Public Preview-Version von Databricks SQL vorstellen zu können. Hierbei handelt es sich um eine intuitive Umgebung zum Ausführen von Ad-hoc-Abfragen sowie zum Erstellen von Dashboards für gespeicherte Daten in Ihrem Data Lake. Databricks SQL ermöglicht Ihrem Unternehmen den Betrieb einer Multi-Cloud Lakehouse-Architektur, die Data-Warehousing-Leistung mit Data-Lake-Wirtschaftlichkeit bietet. Databricks SQL:

  • Ermöglicht dank Integration in bereits verwendete BI-Tools wie Tableau und Microsoft Power BI das Abfragen der umfassendsten und neuesten Daten in Ihrem Data Lake.
  • Ergänzt bereits vorhandene BI-Tools mit einer SQL-nativen Schnittstelle, die es Data Analysts und Data Scientists ermöglicht, Data Lake-Daten direkt innerhalb von Azure Databricks abzufragen.
  • Ermöglicht das Teilen von Abfrageerkenntnissen über umfassende Visualisierungen und Drag & Drop-Dashboards mit automatischen Warnungen für wichtige Datenänderungen.
  • Nutzt Herstellen einer Verbindung mit einem SQL-Warehouse für einen zuverlässigen, hochwertigen, skalierbaren, sicheren und leistungsfähigen Data Lake, damit Sie herkömmliche Analyseworkloads mit den neuesten und umfassendsten Daten ausführen können.
  • Führt die Berechtigung USAGE ein, um die Datenzugriffsverwaltung zu vereinfachen. Wenn Sie ein Objekt in einem Schema verwenden möchten, müssen Sie für dieses Schema neben den Berechtigungen, die Sie zum Ausführen der Aktion benötigen, auch über die Berechtigung „USAGE“ verfügen. Die Berechtigung USAGE kann Schemas oder dem Katalog erteilt werden. Für Arbeitsbereiche, in denen bereits die Tabellenzugriffssteuerung verwendet wird, wird die Berechtigung USAGE automatisch der Benutzergruppe für den Stamm CATALOG erteilt. Weitere Informationen finden Sie unter Hive-Metastore-Berechtigungen und sicherungsfähige Objekte (Legacy).

Details finden Sie unter Was ist Data Warehousing in Azure Databricks.

Behobene Probleme

  • SQL-Editor. Der SQL-Editor behält nun markierten Text und die Scrollposition beim Wechseln zwischen Abfrageregisterkarten bei.
  • SQL-Editor. Wenn Sie im SQL-Editor für eine Abfrage auf „Ausführen“ klicken, zu einer anderen Seite navigieren und dann zurückkehren, während die Abfrage noch ausgeführt wird, wird im Editor der richtige Abfragestatus angezeigt. Wenn die Abfrage abgeschlossen wird, während Sie eine andere Seite anzeigen, stehen die Abfrageergebnisse nach Ihrer Rückkehr zur SQL-Editor-Seite zur Verfügung.
  • Sie können MySQL 8.0 jetzt als externen Metastore verwenden.
  • DESCRIBE DETAILBefehle für Delta-Tabellen führen nicht mehr zu einem Fehler mit java.lang.ClassCastException: java.sql.Timestamp cannot be cast to java.time.Instant.
  • Lesen von Parquet-Dateien mit INT96-Zeitstempeln schlägt fehl.
  • Wenn ein Benutzer über die Berechtigung CAN RUN für eine Abfrage verfügt und diese ausführt, wird er im Abfrageverlauf als Abfrageausführer angezeigt, wenn die Abfrage von einem anderen Benutzer erstellt wurde.
  • NULL-Werte werden jetzt beim Rendern eines Diagramms ignoriert, um die Benutzerfreundlichkeit von Diagrammen zu verbessern. Zuvor wurden Balken in einem Balkendiagramm beispielsweise sehr klein angezeigt, wenn NULL-Werte enthalten waren. Jetzt werden die Achsen ausschließlich auf der Grundlage von Nicht-NULL-Werten festgelegt.

Bekannte Probleme

  • Das Lesen von Daten aus Delta Lake-fremden Datenquellen an SQL-Endpunkten mit mehreren Clustern und Lastenausgleich kann inkonsistent sein.
  • Delta-Tabellen, auf die in Databricks SQL zugegriffen wird, laden ihr Schema und ihre Tabelleneigenschaften in den konfigurierten Meta-Speicher. Bei Verwendung eines externen Metastore können Sie Delta Lake-Informationen im Metastore anzeigen. Von Delta Lake wird versucht, diese Informationen nach Möglichkeit auf dem neuesten Stand zu halten. Sie können auch den Befehl DESCRIBE <table> verwenden, um sicherzustellen, dass die Informationen in Ihrem Metastore aktualisiert werden.
  • Databricks SQL unterstützt keinen Zeitzonenversatz wie „GMT+8“ als Sitzungszeitzonen. Die Problemumgehung besteht darin, stattdessen eine regionsbasierte Zeitzone (https://en.wikipedia.org/wiki/List_of_tz_database_time_zones) wie „Etc/GMT+8“ zu verwenden. Weitere Informationen zum Festlegen von Zeitzonen finden Sie unter SET TIME ZONE.

Häufig gestellte Fragen (FAQ)

Wie werden Databricks SQL-Workloads in Rechnung gestellt?

Databricks SQL-Workloads werden gemäß der Standard-SKU „Jobs Compute“ in Rechnung gestellt.

Wo werden SQL-Endpunkte ausgeführt?

Wie Azure Databricks-Cluster werden SQL-Endpunkte in Ihrem Azure-Konto erstellt und verwaltet. SQL-Endpunkte verwalten SQL-optimierte Cluster automatisch in Ihrem Konto und führen entsprechend den Anforderungen der Endbenutzer eine Skalierung durch.

Kann ich SQL-Endpunkte aus SQL-Notebooks des Arbeitsbereichs Data Science & Engineering verwenden?

Nein Sie können SQL-Endpunkte über Databricks SQL-Abfragen, BI-Tools und andere JDBC und ODBC-Clients verwenden.

Mir wurde der Zugriff auf Daten mithilfe der Cloudanbieter-Anmeldeinformationen gewährt. Warum kann ich auf diese Daten in Databricks SQL nicht zugreifen?

In der Databricks SQL unterliegt der gesamte Datenzugriff der Datenzugriffssteuerung. Ein Administrator oder Datenbesitzer muss Ihnen zunächst die entsprechenden Berechtigungen erteilen.