Settembre 2023

Queste funzionalità e i miglioramenti della piattaforma Azure Databricks sono stati rilasciati a settembre 2023.

Nota

Le versioni vengono preparate. L'area di lavoro di Azure Databricks potrebbe non essere aggiornata fino a una settimana o più dopo la data di rilascio iniziale.

Lakehouse Federation disponibile nei cluster a utente singolo

29 settembre 2023

La federazione di Lakehouse è ora disponibile in cluster a utente singolo che usano Databricks Runtime 13.1 e versioni successive. Solo il proprietario della connessione può eseguire query sui cataloghi federati. Vedere Che cos'è Lakehouse Federation?.

Delegare la possibilità di creare credenziali di archiviazione nel catalogo unity

29 settembre 2023

È ora possibile concedere agli utenti le autorizzazioni per creare credenziali di archiviazione in un metastore del catalogo Unity usando il nuovo privilegio CREATE STORAGE CREDENTIAL. Vedere CREATE STORAGE CREDENTIAL.

Databricks Runtime 14.1 (Beta)

28 settembre 2023

Databricks Runtime 14.1 e Databricks Runtime 14.1 ML sono ora disponibili come versioni beta.

Vedere Databricks Runtime 14.1 e Databricks Runtime 14.1 per Machine Learning.

Modello GPU per il servizio ottimizzato per i modelli di linguaggio di grandi dimensioni in anteprima pubblica

28 settembre 2023

Il modello usato in Azure Databricks supporta la distribuzione di modelli PyTorch e TensorFlow usando risorse di calcolo GPU. Questa funzionalità si trova in Anteprima Pubblica in aree selezionate e si applica anche alla distribuzione GPU dei modelli registrati con le varianti mlflow.pyfunc, mlflow.pytorch, mlflow.tensorflowe mlflow.transformers. Vedere Tipi di carico di lavoro GPU.

Questa anteprima include anche il supporto della distribuzione GPU ottimizzata per la gestione di modelli linguistici di grandi dimensioni. Vedere Servizio LLM (Optimized Large Language Model)

Impedire che le esecuzioni di un processo vengano saltate al raggiungimento dei limiti di concorrenza

27 settembre 2023 - 2 ottobre 2023

Per impedire che le esecuzioni di un processo di Azure Databricks vengano ignorate a causa dei limiti di concorrenza, è ora possibile abilitare la coda nel processo. Quando l'accodamento è abilitato, se viene raggiunto un limite di esecuzione simultanea, l'attività viene inserita in lista di attesa finché non c'è capacità disponibile per eseguirla. Vedere Abilitare la coda di esecuzioni di processi.

Provider Databricks Terraform aggiornato alla versione 1.27.0

27 settembre 2023

Il provider Databricks Terraform versione 1.27.0 aggiunge owner e force_destroy a databricks_metastore_data_access, include diversi miglioramenti aggiuntivi e correzioni di bug e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.27.0.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.206.0 (anteprima pubblica)

27 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.206.0. Questa versione abilita le sostituzioni per i target nei cluster di pipeline negli Asset Bundle di Databricks, migliora l'esperienza di inizializzazione del template del bundle e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 0.206.0.

Databricks SDK per Go aggiornato alla versione 0.21.0 (beta)

27 settembre 2023

Databricks SDK per Go versione 0.21.0 introduce più di una dozzina di modifiche che causano un'interruzione dell'API, aggiunge oltre una dozzina di API e aggiunge una dozzina di campi. Per altre informazioni, vedere il log delle modifiche per la versione 0.21.0.

Le tabelle di inferenza per i modelli che servono gli endpoint sono anteprima pubblica

26 settembre 2023

Abilitare le tabelle di inferenza nel modello che gestisce gli endpoint per acquisire le richieste in ingresso e le risposte in uscita a tali endpoint e registrarle come tabella Delta del catalogo Unity. A sua volta, è possibile usare i dati in questa tabella per monitorare, eseguire il debug e migliorare i modelli di Machine Learning. Consulta le tabelle di inferenza per il monitoraggio e il debug dei modelli.

Per registrarsi all’anteprima pubblica, contattare il team dell'account Azure Databricks.

Driver ODBC di Databricks 2.7.5

23 settembre 2023

È stata rilasciata la versione 2.7.5 del driver ODBC di Databricks (download). Questa versione aggiunge i miglioramenti e le nuove funzionalità che seguono:

• Miglioramento dell'autenticazione client OAuth 2.0 e supporto per l'individuazione degli endpoint OIDC.
• Crittografia lato server con chiavi fornite dal cliente.
• Funzione Timedate.
• Miglioramento dei messaggi di errore per il recupero dei dati dal cloud.
• Aggiornamenti della sicurezza.

Questa versione risolve anche la regressione seguente nella versione 2.7.3:

• La funzione SQLForeignKeys restituisce un risultato vuoto se il chiamante passa un valore NULL per il catalogo della tabella primaria o della tabella esterna.

La versione 2.7.5 restituisce ora tutte le chiavi primarie o le chiavi esterne associate alla tabella correlata se il catalogo dell'altra tabella è impostato NULL.

Estensione Databricks per Visual Studio Code aggiornata alla versione 1.1.3

21 settembre 2023

L'estensione Databricks per Visual Studio Code versione 1.1.3 aggiunge alcune correzioni secondarie. Per altre informazioni, vedere il log delle modifiche per la versione 1.1.3.

Esecuzione di processi con un’entità servizio è disponibile a livello generale

21 settembre 2023

I ruoli sui principali del servizio e la configurazione per l'esecuzione dei processi usando l'identità del principale del servizio sono ora disponibili in generale.

Vedere Ruoli per la gestione dei principali del servizio e Configurare l'identità per le esecuzioni dei processi di lavoro.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.205.2 (anteprima pubblica)

21 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.205.2. Questa versione contiene alcuni aggiornamenti secondari. Per altre informazioni, vedere il log delle modifiche per la versione 0.205.2.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.205.1 (anteprima pubblica)

20 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.205.1. Questa versione abilita le sostituzioni degli obiettivi per le attività di lavoro nei pacchetti di risorse di Databricks e altre funzioni. Per altre informazioni, vedere il log delle modifiche per la versione 0.205.1.

Databricks SDK per Go aggiornato alla versione 0.20.0 (beta)

20 settembre 2023

Databricks SDK per Go versione 0.20.0 aggiunge più di una dozzina di API, aggiunge una mezza dozzina di campi, modifica alcuni campi e metodi e rimuove alcune API. Per altre informazioni, vedere il log delle modifiche per la versione 0.20.0.

Databricks SDK per Python aggiornato alla versione 0.9.0 (beta)

20 settembre 2023

Databricks SDK per Python versione 0.9.0 modifica alcuni metodi e campi, aggiunge circa 10 campi, aggiunge circa 20 classi di dati e introduce modifiche e rimozioni aggiuntive. Per altre informazioni, vedere il log delle modifiche per la versione 0.9.0.

Databricks SDK per Python aggiornato alla versione 0.7.1 (beta)

20 settembre 2023

Databricks SDK per Python versione 0.7.1 include una correzione secondaria per migliorare le prestazioni di download dei file. Per altre informazioni, vedere il log delle modifiche per la versione 0.7.1.

Provider Databricks Terraform aggiornato alla versione 1.26.0

20 settembre 2023

provider Databricks Terraform versione 1.26.0 aggiunge il supporto per gli script di inizializzazione dai volumi di Unity Catalog, include diversi miglioramenti aggiuntivi, correzioni di bug e altro. Per altre informazioni, vedere il log delle modifiche per la versione 1.26.0.

Databricks Connect per Databricks Runtime 14.0

20 settembre 2023

Databricks Connect per Databricks Runtime 14.0 supporta lo streaming strutturato completo (incluso foreachBatch) e le query a esecuzione prolungata che si riconnettono dopo un'interruzione.

Dashboard di Lakeview in anteprima pubblica

20 settembre 2023

I dashboard di Lakeview consentono di condividere visualizzazioni e set di dati usando un modello di governance dei dati semplificato e unificato. Vedere Dashboard.

Databricks Connect V2 è anteprima pubblica per Scala

19 settembre 2023

Databricks Connect per Databricks Runtime 13.3 LTS supporta ora Scala in anteprima pubblica, inclusi dataframe, delta, flusso strutturato e altro ancora.

Per Python, l'annullamento delle query è ora supportato e la classe DatabricksSession può ora essere usata nei notebook e nei processi di Azure Databricks.

Modello GPU in anteprima pubblica

19 settembre 2023

Il modello usato in Azure Databricks supporta la distribuzione di modelli PyTorch e TensorFlow usando risorse di calcolo GPU. Questa funzionalità è disponibile in [Anteprima pubblica] in aree selezionate e si applica anche alla distribuzione GPU dei modelli registrati con le varianti mlflow.pyfunc, mlflow.pytorch, mlflow.tensorflowe mlflow.transformers. Vedere Tipi di carico di lavoro GPU.

Calcolo delle funzionalità su richiesta ora disponibile in Unity Catalog (anteprima pubblica)

14 settembre 2023

Le funzionalità di apprendimento automatico possono ora essere calcolate su richiesta in fase di inferenza. La logica di calcolo delle funzionalità, i modelli e i dati sono tutti regolati dal catalogo Unity. Ciò consente ai modelli di calcolare le funzionalità usando input disponibili solo in fase di inferenza, ad esempio la posizione corrente di un utente. Per altre informazioni, vedere Funzionalità di calcolo su richiesta tramite funzioni definite dall'utente Python.

Databricks Runtime 14.0 è disponibile a livello generale

14 settembre 2023

Databricks Runtime 14.0 e Databricks Runtime 14.0 ML sono ora disponibili a livello generale.

Vedere Databricks Runtime 14.0 (EoS) e Databricks Runtime 14.0 per Machine Learning (EoS).

Aggiornamento delle notifiche email dell’account

14 settembre 2023

Databricks non invia più notifiche tramite posta elettronica quando gli utenti vengono aggiunti a un account Azure Databricks. Gli utenti continueranno a ricevere notifiche tramite posta elettronica quando ricevono l'accesso a un'area di lavoro.

Provider Databricks Terraform aggiornato alla versione 1.25.1

13 settembre 2023

Il provider Databricks Terraform versione 1.25.1 è stato rilasciato con miglioramenti secondari e correzioni di bug. Per altre informazioni, vedere il log delle modifiche per la versione 1.25.1.

Databricks SDK per Go aggiornato alla versione 0.19.2 (beta)

13 settembre 2023

Databricks SDK per Go versione 0.19.2 contiene una correzione secondaria. Per altre informazioni, vedere il log delle modifiche per la versione 0.19.2.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.205.0 (anteprima pubblica)

13 settembre 2023

L’interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.205.0. Questa è la prima versione della CLI di Databricks per supportare i Databricks Asset Bundles in anteprima pubblica. Per altre informazioni, vedere il log delle modifiche per la versione 0.205.0.

Posizione riservata per /Workspace

13 settembre 2023

La posizione /Workspace è ora riservata. Non è più possibile definire una directory denominata /Workspace relativa al percorso completo in Azure Databricks.

Pacchetti di asset Databricks (anteprima pubblica)

12 settembre 2023

I bundle di asset di Databricks, ora in anteprima pubblica, consentono di esprimere i progetti di dati, analisi e Machine Learning end-to-end come raccolta di file di origine. In questo modo è più semplice applicare procedure consigliate per la progettazione dei dati, ad esempio controllo del codice sorgente, revisione del codice, test e CI/CD.

Provider Databricks Terraform aggiornato alla versione 1.25.0

12 settembre 2023

Il provider Databricks Terraform versione 1.25.0 include l'aggiunta delle autorizzazioni IS_OWNER per i magazzini SQL di Databricks, correzioni minori, aggiornamenti della documentazione e ulteriori miglioramenti. Per altre informazioni, vedere il log delle modifiche per la versione 1.25.0.

Estensione Databricks per Visual Studio Code aggiornata alla versione 1.1.2

12 settembre 2023

L’estensione Databricks per Visual Studio Code versione 1.1.2 aggiunge il supporto sperimentale per %run e # MAGIC nei notebook di Azure Databricks, risolve i problemi di percorso relativi a più installazioni locali della CLI Databricks e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.1.2.

Partner Connect supporta Snowplow

12 settembre 2023

È ora possibile usare Partner Connect per connettere l'area di lavoro di Azure Databricks a Snowplow. Per ulteriori informazioni, vedi Connessione a Snowplow.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.204.1 (anteprima pubblica)

11 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.204.1. Per altre informazioni, vedere il log delle modifiche per la versione 0.204.1.

Filtrare i dati sensibili con filtri di riga e maschere di colonna (anteprima pubblica)

11 settembre 2023

È ora possibile applicare filtri di riga e maschere di colonna alle tabelle per impedire l'accesso ai dati sensibili da parte di determinati utenti. Questi filtri e maschere vengono implementati come funzioni definite dall'utente (UDF) SQL. Vedere Filtrare i dati delle tabelle sensibili usando filtri di riga e maschere di colonna.

Le tabelle di sistema includono ora lo schema del Marketplace (anteprima pubblica)

8 settembre 2023

Le tabelle di sistema ora includono uno schema marketplace che archivia i dati del provider del Marketplace. È possibile eseguire una query sulla tabella marketplace.listing_access_events per recuperare le informazioni sui consumatori relative alle azioni eseguite sulle inserzioni. Per ulteriori informazioni, vedere riferimento alle tabelle del sistema Marketplace.

La tabella del sistema tariffario è ora disponibile (anteprima pubblica)

8 settembre 2023

tabelle di sistema ora includono una tabella dei prezzi (system.billing.list_prices) in cui è possibile monitorare il costo di uno SKU nel tempo. Questi log consentono di eseguire l'analisi dei costi e monitorare le modifiche ai prezzi. Consultare la tabella di riferimento del sistema tariffario.

Databricks SDK per Go aggiornato alla versione 0.19.1 (beta)

7 settembre 2023

Databricks SDK per Go versione 0.19.1 continua alcuni aggiornamenti e correzioni secondari. Per altre informazioni, vedere il log delle modifiche per la versione 0.19.1.

Driver ODBC di Databricks 2.7.3

7 settembre 2023

È stata rilasciata la versione 2.7.3 del driver ODBC di Databricks (download). Questa versione include le seguenti funzionalità e correzioni di bug:

• Correzioni di vulnerabilità aggiornando le dipendenze di terze parti.
• SQL_ATTR_MAX_ROWS supporto che consente a un client di limitare il numero di righe da recuperare in una query per velocizzare il caricamento, ad esempio l'anteprima.
• Aggiornamento del supporto macOS. Il driver supporta ora Apple Silicon/M1.
• Supporto per l'autenticazione basata su browser OAuth2 per facilitare l'accesso unico (SSO).

Importante

Se si usano api chiave primaria e chiave esterna, la funzione SQLForeignKeys restituisce un risultato vuoto se il chiamante passa un valore NULL per il catalogo della tabella primaria o della tabella esterna. Questo problema è noto agli sviluppatori.

Interfaccia della riga di comando di Databricks aggiornata alla versione 0.204.0 (anteprima pubblica)

6 settembre 2023

L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.204.0. Questa versione include il raggruppamento di comandi correlati alle autorizzazioni, aggiunte e modifiche a diversi comandi e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 0.204.0.

Esplora Dati è ora Esplora Cataloghi

6 settembre 2023

Esplora Dati è stato rinominato in Esplora Cataloghi per riconoscere il fatto che è possibile usarlo per lavorare con tutti gli oggetti sicurizzabili in Unity Catalog, non solo con oggetti di dati. Consulta Che cos'è Esplora cataloghi?.

Databricks SDK per Go aggiornato alla versione 0.19.0 (beta)

4 settembre 2023

Databricks SDK per Go versione 0.19.0 rinomina le API delle autorizzazioni, aggiunge 8 API, aggiunge 5 campi, modifica e rimuove alcuni campi e modifica alcuni metodi. Per altre informazioni, vedere il log delle modifiche per la versione 0.19.0.

Databricks SDK per Python aggiornato alla versione 0.8.0 (beta)

4 settembre 2023

Databricks SDK per Python versione 0.8.0 rinomina le API delle autorizzazioni, aggiunge una mezza dozzina di campi, aggiunge una mezza dozzina di classi di dati e introduce diverse modifiche e rimozioni. Per altre informazioni, vedere il log delle modifiche per la versione 0.8.0.

Delegare i privilegi della lista di consentiti in Unity Catalog

1 settembre 2023

È ora possibile delegare i privilegi per la gestione degli elementi nell'allowlist per il Catalogo Unity. Si veda Librerie Allowlist e script di init su calcolo condiviso.

L'integrazione delle app GitHub nei Repos è in General Availability (GA)

1 settembre 2023

L’integrazione delle app GitHub in Repos è disponibile a livello generale. La funzionalità consente una gestione più semplice delle credenziali Git quando si esegue l'integrazione con GitHub in Repos.

Importante

Le app GitHub non sono supportate in GitHub Enterprise Server.