Febbraio 2022
Queste funzionalità e i miglioramenti della piattaforma Azure Databricks sono stati rilasciati a febbraio 2022.
Nota
Le versioni vengono gestite in staging. L'account Azure Databricks potrebbe non essere aggiornato fino a una settimana o più dopo la data di rilascio iniziale.
Pianificazione semplificata per le pipeline di tabelle live Delta (anteprima pubblica)
28 febbraio - 2 marzo 2022
È ora possibile creare un processo di Azure Databricks pianificato per le pipeline attivate direttamente dall'interfaccia utente di Tabelle live Delta. In precedenza, era necessario creare il processo e la pianificazione per eseguire il processo dall'interfaccia utente dei processi.
Esplorare facilmente la cronologia degli aggiornamenti della pipeline delle tabelle live Delta (anteprima pubblica)
28 febbraio - 2 marzo 2022
È ora possibile visualizzare una cronologia degli aggiornamenti della pipeline, inclusi lo stato dell'aggiornamento, i dettagli e gli eventi, con l'elenco a discesa Cronologia aggiornamenti nell'interfaccia utente di Tabelle live Delta.
Verificare l’idempotenza del processo per la richiesta di esecuzione del processo API
22-28 febbraio 2022: Versione 3.66
È ora possibile usare il parametro facoltativo idempotency_token con l'operazione Di esecuzione dell'API Processi per assicurarsi che venga avviata esattamente un'esecuzione di un processo. In precedenza, l'invio di più Run now richieste per lo stesso processo potrebbe essere stato avviato più di un'esecuzione.
Per altre informazioni sull'idempotenza del processo, vedere Come garantire l'idempotenza per i processi.
Miglioramenti della stabilità e della scalabilità dei servizi per i processi
22-28 febbraio 2022: Versione 3.66
Le modifiche seguenti aumentano la stabilità e la scalabilità del servizio Processi:
- A ogni nuovo processo viene assegnato un identificatore più lungo, univoco, numerico, non sequenziale. I client che usano l'API Processi e dipendono da una lunghezza fissa dell'identificatore o da identificatori sequenziali o monotonici devono essere modificati per accettare identificatori più lunghi, non sequenziali e non ordinati. Il tipo di identificatore di
int64rimane invariato e la compatibilità viene mantenuta per i client che usano numeri a virgola mobile IEEE 754 a 64 bit, ad esempio client JavaScript. - Il valore del campo
number_in_job, incluso nella risposta ad alcune richieste API Processi, è ora impostato sullo stesso valore dirun_id.
Confrontare le esecuzioni di MLflow da esperimenti diversi
22-28 febbraio 2022: Versione 3.66
È ora possibile visualizzare e confrontare le esecuzioni da più esperimenti. Vedere Confrontare le esecuzioni da più esperimenti.
Miglioramenti alla visualizzazione delle esecuzioni di confronto di MLflow
22-28 febbraio 2022: Versione 3.66
La visualizzazione delle esecuzioni di confronto è stata migliorata. Le visualizzazioni vengono ora visualizzate nella parte superiore della pagina. È ora possibile scorrere o comprimere le tabelle che mostrano informazioni sull'esecuzione, parametri e metriche. È ora anche possibile semplificare la visualizzazione nascondendo parametri e metriche che non variano a seconda delle esecuzioni.
Per informazioni sulla pagina delle esecuzioni di confronto, vedere Confrontare le esecuzioni. Per istruzioni su come confrontare le esecuzioni, vedere Confrontare le esecuzioni.
Miglioramento della visibilità dei proprietari dell’esecuzione del processo nell’interfaccia utente dei cluster
22-28 febbraio 2022: Versione 3.66
La scheda Cluster di processo nell'interfaccia utente di calcolo è stata aggiornata per visualizzare l'esecuzione del processo come utente anziché come proprietario del processo. Questo aggiornamento si basa sulle modifiche apportate al modello di autorizzazioni per i processi e offre una migliore visibilità sul proprietario di un'esecuzione del processo. Vedere Visualizzare il calcolo.
Eliminare le colonne del set di dati in AutoML
22-28 febbraio 2022: Versione 3.66
In Databricks Runtime 10.3 ML e versioni successive, per problemi di classificazione e regressione, è ora possibile specificare colonne nel set di dati che AutoML non deve usare per il training. Vedere Informazioni di riferimento sulle API Python di AutoML.
La pagina Esperimenti è disponibile a livello generale
22-28 febbraio 2022: Versione 3.66
La pagina esperimenti è ora disponibile a livello generale.
Supporto per le tabelle temporanee nell’interfaccia Python delle tabelle Live Delta
22-28 febbraio 2022: Versione 3.66
È ora possibile usare la temporary proprietà quando si dichiarano le tabelle con l'interfaccia Python di Tabelle live Delta. La definizione di una tabella temporanea indica a Delta Live Tables di non rendere persistenti i metadati per la tabella e impedisce la pubblicazione della tabella quando l'impostazione target è configurata. Per informazioni sulla definizione delle tabelle Python, vedere la specifica Python.
Miglioramenti dell’interfaccia utente per le tabelle Live Delta (anteprima pubblica)
22-28 febbraio 2022: Versione 3.66
Questa versione include i seguenti miglioramenti per l'interfaccia utente di Delta Live Tables:
- È ora possibile modificare le impostazioni della pipeline nella finestra di dialogo Impostazioni nell'interfaccia utente di Tabelle live Delta, fornendo un'interfaccia più intuitiva. In precedenza, le impostazioni venivano modificate modificando la specifica JSON. Per selezionare l'interfaccia utente o la visualizzazione JSON per modificare le impostazioni della pipeline, fare clic sul pulsante UI o JSON nella finestra di dialogo Impostazioni .
- Il registro eventi nella pagina Dettagli pipeline evidenzia ora i record di errore, semplificando l'identificazione e la risoluzione degli errori nelle pipeline.
- La visualizzazione dello stato di avanzamento delle pipeline in esecuzione è stata migliorata. Ora, quando si visualizza il grafico per la pipeline, i nodi nello
RUNNINGstato hanno un bordo in ingresso animato e un bordo superiore animato.
Termine del supporto di Databricks Runtime serie 9.0
17 febbraio 2022
Il supporto per Databricks Runtime 9.0 e Databricks Runtime 9.0 per Machine Learning è terminato il 17 febbraio. Vedere Cicli di vita del supporto di Databricks.
Aggiornamenti della pagina di destinazione data science & engineering
10 febbraio 2022
Abbiamo aggiornato l'aspetto della pagina di destinazione Data Science & Engineering. Alcuni collegamenti sono stati modificati, ma non sono state apportate altre modifiche importanti alle funzionalità.
Databricks Repos supporta ora AWS CodeCommit per l’integrazione con Git
7-14 febbraio 2022: versione 3.65
È ora possibile usare i repository AWS CodeCommit con Databricks Repos.
Visualizzazione migliorata per le pipeline di tabelle live Delta (anteprima pubblica)
7-14 febbraio 2022: versione 3.65
La visualizzazione DAG della pipeline è stata riprogettata per migliorare l'usabilità e la navigazione. I miglioramenti includono una modifica per visualizzare grafici da sinistra a destra anziché dall'alto verso il basso, offrendo una visualizzazione più intuitiva dell'esecuzione della pipeline.
Parser Markdown aggiornato
7-14 febbraio 2022: versione 3.65
Il parser Markdown usato nei notebook di Azure Databricks è stato aggiornato. Alcuni dei problemi rilevati con l'aggiornamento precedente sono stati risolti. In particolare, non è più necessario inserire uno spazio tra gli hashtag e il testo di un titolo, e i collegamenti con gli spazi ora vengono visualizzati correttamente.
Le tabelle Live Delta supportano ora l’elaborazione di Change Data Capture (anteprima pubblica)
7-14 febbraio 2022: versione 3.65
È ora possibile implementare l'elaborazione change data capture (CDC) nelle pipeline di tabelle live Delta. L'elaborazione CDC è supportata con le interfacce SQL e Python. Vedere APPLICA MODIFICHE API: semplificare il Change Data Capture con Delta Live Tables.
Altri metastore ora disponibili in più aree
8 febbraio 2022
I metastore seguenti sono ora disponibili nelle aree seguenti:
brazilsouth:
consolidated-brazilsouth-prod-metastore.mysql.database.azure.com
centralus:
consolidated-centralus-prod-metastore-addl-2.mysql.database.azure.comconsolidated-centralus-prod-metastore-addl-3.mysql.database.azure.com
eastus:
consolidated-eastus-prod-metastore-addl-2.mysql.database.azure.comconsolidated-eastus-prod-metastore-addl-3.mysql.database.azure.comconsolidated-eastus-prod-metastore-addl-4.mysql.database.azure.com
eastus2
consolidated-eastus2-prod-metastore-addl-2.mysql.database.azure.comconsolidated-eastus2-prod-metastore-addl-3.mysql.database.azure.com
francecentral
consolidated-francecentral-prod-metastore.mysql.database.azure.com
northeurope
consolidated-northeurope-prod-metastore-addl-2.mysql.database.azure.comconsolidated-northeurope-prod-metastore-addl-3.mysql.database.azure.com
southeastasia
consolidated-southeastasia-prod-metastore-addl-1.mysql.database.azure.com
switzerlandnorth
consolidated-switzerlandnorth-prod-metastore-0.mysql.database.azure.com
switzerlandwest
consolidated-switzerlandwest-prod-metastore-0.mysql.database.azure.com
uksouth
consolidated-uksouth-prod-metastore-addl-1.mysql.database.azure.com
westeurope
consolidated-westeurope-prod-metastore-addl-2.mysql.database.azure.comconsolidated-westeurope-prod-metastore-addl-3.mysql.database.azure.com
Nei percorsi definiti dall'utente (UDR) si devono sempre includere tutti i nomi host rilevanti per ogni area utilizzata. Vedere Impostazioni di percorsi definiti dall'utente per Azure Databricks.
Selezionare i framework degli algoritmi da usare con AutoML
7-14 febbraio 2022: versione 3.65
In Databricks Runtime 10.3 ML e versioni successive è possibile specificare framework di algoritmo, ad esempio scikit-learn, che AutoML non deve considerare come sviluppa modelli. Per impostazione predefinita, AutoML considera i modelli di scikit-learn, XGBoost e LightGBM per problemi di classificazione e regressione e da Profeta e Auto-ARIMA per la previsione dei problemi. Vedere Informazioni di riferimento sulle API Python di AutoML.
I modelli MLflow ospitati da Databricks possono ora cercare funzionalità dagli archivi online
3 febbraio 2022
I modelli in pacchetto con i metadati di Feature Store possono cercare automaticamente i valori delle funzionalità dai negozi online in fase di gestione.
Databricks Runtime 10.3 e 10.3 ML sono disponibili a livello generale; 10.3 Photon è anteprima pubblica
2 febbraio 2022
Databricks Runtime 10.3 e Databricks Runtime 10.3 ML sono ora disponibili a livello generale. Databricks Runtime 10.3 Photon è disponibile in anteprima pubblica.