Ottobre 2023
Queste funzionalità e i miglioramenti della piattaforma Azure Databricks sono stati rilasciati a ottobre 2023.
Nota
Le versioni vengono gestite in staging. L'area di lavoro di Azure Databricks potrebbe non essere aggiornata fino a una settimana o più dopo la data di rilascio iniziale.
Connettività sicura serverless per Databricks SQL Serverless (anteprima pubblica)
31 ottobre 2023
I nuovi strumenti di connettività sicura serverless consentono di controllare l'accesso alla rete da sql warehouse serverless alle origini dati in Archiviazione di Azure. È possibile scegliere un firewall di archiviazione usando ID subnet o abilitare la connettività privata con collegamento privato di Azure. Per partecipare all'anteprima pubblica, contattare il team dell'account Azure Databricks. Vedere Rete del piano di calcolo serverless.
Se sono presenti firewall di archiviazione configurati usando ID subnet elencati nella documentazione di Azure Databricks prima del 31 ottobre 2023, Databricks consiglia di aggiornare le configurazioni del firewall per ognuna delle aree di lavoro usando uno dei nuovi strumenti. Ciò consente di applicare una implementazione coerente in tutte le aree di lavoro. Se si sceglie di non aggiornare le configurazioni esistenti, le aree di lavoro continueranno a funzionare.
Visualizzare l'origine YAML per un processo di Azure Databricks
30 ottobre 2023
È ora possibile visualizzare e copiare l'origine YAML per un processo facendo clic sulla pagina dei dettagli del processo e selezionando Visualizza YAML/JSON. È possibile usare l'origine YAML per creare flussi di lavoro CI/CD con i bundle di asset di Databricks. Vedere Che cosa sono i bundle di asset di Databricks?.
Aggiungere la logica condizionale ai flussi di lavoro di Azure Databricks
30 ottobre 2023
È ora possibile usare l'attività If/else condition
per eseguire attività in modo condizionale in un processo di Azure Databricks in base ai risultati di un'espressione booleana. Vedere Aggiungere la logica di diramazione a un processo con l'attività condizione If/else.
Configurare i parametri in un processo di Azure Databricks a cui è possibile fare riferimento da tutte le attività del processo
30 ottobre 2023
È ora possibile aggiungere parametri ai processi di Azure Databricks passati automaticamente a tutte le attività di processo che accettano coppie chiave-valore. Vedere Configurare i parametri del processo. Inoltre, è ora possibile usare un set espanso di riferimenti di valore per passare il contesto e lo stato tra le attività del processo. Vedere Che cos'è un valore dinamico di riferimento?.
Abilitare automaticamente i vettori di eliminazione
30 ottobre 2023
È ora possibile abilitare i vettori di eliminazione in tutte le nuove tabelle Delta in Databricks Runtime 14.0 e versioni successive con l'impostazione di amministrazione dell'area di lavoro Abilita automaticamente vettori di eliminazione. Questo comportamento è attualmente esplicito, ma cambierà per rifiutare esplicitamente in futuro. Databricks consiglia di configurare manualmente un'opzione per questa impostazione. Vedere Abilitare automaticamente i vettori di eliminazione.
Il supporto del catalogo Unity per è disponibile a UNDROP TABLE
livello generale
25 ottobre 2023
È possibile eliminare una tabella gestita o esterna eliminata in uno schema esistente entro sette giorni dall'eliminazione. Databricks Runtime 12.1 e versioni successive Vedere UNDROP TABLE e SHOW TABLES DROPPED.See UNDROP TABLE and SHOW TABLES DROPPED.
Partner Connect supporta Dataiku
25 ottobre 2023
È ora possibile usare Partner Connect per connettere l'area di lavoro di Azure Databricks a Dataiku. Vedere Connettersi a Dataiku.
I notebook generati da AutoML vengono ora salvati come artefatti MLflow
24 ottobre 2023
I notebook generati da AutoML vengono ora salvati come artefatti MLflow in tutte le versioni di Databricks Runtime per Machine Learning.
Nuova area: Qatar Centrale
23 ottobre 2023
Azure Data Factory è ora disponibile in Svezia centrale. Vedere Aree di Azure Databricks.
Volumi del catalogo Unity supportati con Firewall di Azure e collegamento privato
23 ottobre 2023
È ora possibile usare i volumi di Catalogo Unity insieme agli account di archiviazione di Azure configurati con Firewall di Azure o collegamento privato. In questo modo viene rimossa una limitazione precedente.
Ottimizzazione predittiva (anteprima pubblica)
24 ottobre 2023
L'ottimizzazione predittiva elimina la necessità di gestire manualmente le operazioni di manutenzione per le tabelle Delta. Le operazioni di manutenzione vengono eseguite solo se necessario, eliminando le esecuzioni non necessarie per le operazioni di manutenzione e il carico di lavoro associato al rilevamento e alla risoluzione dei problemi delle prestazioni. Vedere Ottimizzazione predittiva per le tabelle gestite di Unity Catalog.
Le tabelle di sistema di calcolo sono ora disponibili (anteprima pubblica)
23 ottobre 2023
Lo system.compute
schema contiene due nuove tabelle che è possibile usare per monitorare le risorse di calcolo nell'account: clusters
e node_types
.
La tabella clusters è una tabella delle dimensioni a modifica lenta che contiene la cronologia completa delle configurazioni del cluster nel tempo per i cluster di tutti gli scopi e i processi. La tabella dei tipi di nodo acquisisce i tipi di nodo attualmente disponibili con le informazioni di base sull'hardware. Se non si ha accesso a queste tabelle di sistema, assicurarsi di aver abilitato lo schema di calcolo nell'account . Vedere Abilitare gli schemi di tabella di sistema.
Per altre informazioni sulle tabelle di sistema di calcolo, vedere Informazioni di riferimento sulle tabelle di sistema di calcolo.
Il calcolo delle funzionalità su richiesta è disponibile a livello generale
19 ottobre 2023
Le funzionalità di Machine Learning possono ora essere calcolate su richiesta in fase di inferenza. In questo modo, i modelli possono calcolare le funzionalità usando input disponibili solo in fase di inferenza, ad esempio la posizione corrente di un utente o l'uso di funzionalità che sono proibitive per precomputare, archiviare e aggiornare. Il codice di training del modello può definire un grafico arbitrario di ricerche e calcoli delle funzionalità eseguiti durante il training e l'inferenza del modello.
La logica di calcolo delle funzionalità, i modelli e i dati sono tutti regolati dal catalogo Unity. Per altre informazioni, vedere Funzionalità di calcolo su richiesta tramite funzioni definite dall'utente Python.
Progettazione delle funzionalità nel catalogo unity disponibile a livello generale
19 ottobre 2023
Con La progettazione delle funzionalità nel catalogo unity, Unity Catalog diventa l'archivio delle funzionalità. È possibile usare qualsiasi tabella Delta con una chiave primaria come tabella delle funzionalità per il training o l'inferenza del modello. Il catalogo unity offre funzionalità di individuazione e governance.
Commenti di tabella generati dall'intelligenza artificiale (anteprima pubblica)
18 ottobre 2023
Nell'ambito dell'iniziativa per usare l'intelligenza artificiale per facilitare l'uso di Azure Databricks, Azure Databricks introduce commenti di colonna e tabelle generati dall'intelligenza artificiale nell'anteprima pubblica. In Esplora cataloghi è possibile visualizzare, modificare e aggiungere un commento generato dall'intelligenza artificiale per qualsiasi colonna di tabella o tabella gestita da Unity Catalog. I commenti generati dall'intelligenza artificiale possono usare partner di modelli esterni per fornire risposte. I dati inviati a questi servizi non vengono usati per il training del modello.
Vedere Aggiungere commenti generati dall’IA agli oggetti del catalogo unity.
I modelli nel catalogo unity sono disponibili a livello generale
17 ottobre 2023
I modelli ml in Unity Catalog sono ora disponibili a livello generale. Il catalogo unity offre controllo di accesso centralizzato, controllo, derivazione, condivisione di modelli tra aree di lavoro e flussi di lavoro di implementazione MLOps migliori. Azure Databricks consiglia di usare i modelli in Unity Catalog anziché il Registro modelli dell'area di lavoro. Per altre informazioni, vedere Gestire il ciclo di vita del modello in Unity Catalog.
Librerie ora supportate nei criteri di calcolo (anteprima pubblica)
17 ottobre 2023
Gli amministratori dell'area di lavoro possono ora aggiungere librerie ai criteri di calcolo. Il calcolo che usa i criteri installerà automaticamente la libreria. Gli utenti non possono installare o disinstallare librerie con ambito di calcolo nel calcolo che usano i criteri. Le librerie installate in precedenza verranno disinstallate.
Databricks consiglia di eseguire la migrazione di tutte le librerie installate con script init per usare i criteri di calcolo. Vedere Aggiungere librerie a un criterio.
Partner Connect supporta Monte Carlo
16 ottobre 2023
È ora possibile usare Partner Connect per connettere l'area di lavoro di Azure Databricks a Monte Carlo. Per altre informazioni, vedere Connettere Azure Databricks a Monte Carlo.
Ricerca semantica (anteprima pubblica)
16 ottobre 2023
È ora possibile usare il linguaggio naturale per eseguire ricerche nelle tabelle del catalogo Unity nella finestra di dialogo Ricerca avanzata. Vedere Ricerca semantica.
Abilitare Databricks Assistant a livello di area di lavoro
11 ottobre 2023
Un amministratore dell'area di lavoro può ora abilitare o disabilitare Assistente Databricks per una singola area di lavoro se l'amministratore dell'account lo ha consentito. Per altre informazioni, vedere Ricerca per categorie abilitare Databricks Assistant?.
Nuove impostazioni predefinite photon
11 ottobre 2023
Quando si crea un nuovo cluster tramite l'interfaccia utente, il motore di Runtime di Databricks predefinito è abilitato per Photon. Questo vale per tutti gli scopi e i cluster di processi.
Per impostazione predefinita, i nuovi cluster creati con criteri cluster compatibili con Photon hanno Photon abilitato per impostazione predefinita. Un criterio del cluster è compatibile con Photon se Databricks Runtime lo supporta, il tipo di nodo è supportato e non runtime_engine
è impostato in modo esplicito su STANDARD
.
Databricks Runtime 14.1 è disponibile a livello generale
11 ottobre 2023
Databricks Runtime 14.1 e Databricks Runtime 14.1 ML sono ora disponibili a livello generale.
Vedere Databricks Runtime 14.1 e Databricks Runtime 14.1 per Machine Learning.
Strumenti di sviluppo le note sulla versione sono state spostate
10 ottobre 2023
Le note sulla versione per gli strumenti di sviluppo di Azure Databricks dopo il 10 ottobre 2023 sono ora pubblicate nelle note sulla versione degli strumenti di sviluppo e degli SDK di Azure Databricks invece delle note sulla versione della piattaforma Azure Databricks.
Estensione Databricks per Visual Studio Code aggiornata alla versione 1.1.5
9 ottobre 2023
L'estensione Databricks per Visual Studio Code versione 1.1.5 contiene alcune correzioni secondarie. Per altre informazioni, vedere il log delle modifiche per la versione 1.1.5.
L'I/O predittivo per gli aggiornamenti è disponibile a livello generale
9 ottobre 2023
L'I/O predittivo per gli aggiornamenti è ora disponibile a livello generale in Databricks Runtime 14.0 e versioni successive. Vedere Che cos'è l'I/O predittivo?.
I vettori di eliminazione sono disponibili a livello generale
9 ottobre 2023
I vettori di eliminazione sono ora disponibili a livello generale in Databricks Runtime 14.0 e versioni successive. Vedere Che cosa sono i vettori di eliminazione?.
Partner Connect supporta RudderStack
5 ottobre 2023
È ora possibile usare Partner Connect per connettere l'area di lavoro di Azure Databricks a RudderStack. Per ulteriori informazioni, vedere Connettersi all'account.
Interfaccia della riga di comando di Databricks aggiornata alla versione 0.207.0 (anteprima pubblica)
4 ottobre 2023
L'interfaccia della riga di comando di Databricks (interfaccia della riga di comando di Databricks) è stata aggiornata alla versione 0.207.0. Questa versione contiene aggiornamenti e correzioni delle funzionalità per i bundle di asset di Databricks, apporta aggiunte e modifiche a diversi gruppi di comandi e comandi e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 0.207.0.
Eseguire le celle selezionate in un notebook
4 ottobre 2023
È ora possibile eseguire solo le celle selezionate in un notebook. Vedere Eseguire le celle selezionate.
Usare l'associazione del catalogo dell'area di lavoro per concedere l'accesso in sola lettura a un catalogo
4 ottobre 2023
Quando si usa l'associazione del catalogo dell'area di lavoro per limitare l'accesso al catalogo a aree di lavoro specifiche nell'account, è ora possibile rendere tale accesso di sola lettura. L'associazione di catalogo dell'area di lavoro di sola lettura è utile per scenari come concedere agli utenti l'accesso in sola lettura ai dati di produzione da un'area di lavoro per sviluppatori per abilitare lo sviluppo e il test.
Questo aggiornamento depreca anche l'endpoint /api/2.1/unity-catalog/workspace-bindings/
API e lo sostituisce con /api/2.1/unity-catalog/bindings/
.
Vedere Limitare l'accesso al catalogo a aree di lavoro specifiche.
Estensione Databricks per Visual Studio Code aggiornata alla versione 1.1.4
2 ottobre 2023
L'estensione Databricks per Visual Studio Code versione 1.1.4 aggiunge il supporto per gli URL dell'area di lavoro di Azure Databricks personalizzati e altro ancora. Per altre informazioni, vedere il log delle modifiche per la versione 1.1.4.
Databricks SDK per Python aggiornato alla versione 0.10.0 (beta)
3 ottobre 2023
Databricks SDK per Python versione 0.10.0 introduce 7 modifiche di rilievo, aggiunge 10 classi di dati, aggiunge 6 campi e aggiunge un servizio. Per altre informazioni, vedere il log delle modifiche per la versione 0.10.0.
Databricks SDK per Go aggiornato alla versione 0.22.0 (beta)
3 ottobre 2023
Databricks SDK per Go versione 0.22.0 introduce una modifica dell'API di rilievo e aggiunge un'API. Per altre informazioni, vedere il log delle modifiche per la versione 0.22.0.
Volumi del catalogo Unity ora in anteprima pubblica per Azure Cina
2 ottobre 2023
I volumi del catalogo Unity sono ora disponibili come funzionalità di anteprima pubblica nelle aree di Azure Cina. Vedere Che cosa sono i volumi del catalogo Unity?.