Delta Live Tables versie 2022.37
14 - 22 september 2022
Deze functies en verbeteringen zijn uitgebracht met de release 2022.37 van Delta Live Tables.
Databricks Runtime-versies die door deze release worden gebruikt
Kanaal:
- CURRENT (standaard): Databricks Runtime 10.3.7
- PREVIEW: Databricks Runtime 11.0.5
Nieuwe functies en verbeteringen in deze release
- De API-aanvraag voor de start-update retourneert nu het
request_id
veld in de hoofdtekst van het antwoord. Derequest_id
is een stabiele id voor de oorspronkelijke aanvraag die de update start. Als een update opnieuw wordt geprobeerd of opnieuw wordt gestart, neemt de nieuwe update derequest_id
over.
{
"update_id": "the ID of the update that was started",
"request_id": "The ID of the request that started this update"
}
De nieuwe requests
API-aanvraag (GET /pipelines/{pipeline_id}/requests/{request_id}
) retourneert de status van de pijplijnupdate die is gekoppeld aan request_id
. Het antwoord bevat informatie over de meest recente update.
{
"status": "ACTIVE",
"latest_update": {}
}
- Uw Python-code kan nu
spark.sql
bewerkingen buitendlt.table()
ofdlt.view()
functies aanroepen, zolang de bewerking niet wordt gelezen vanuit een gerealiseerde weergave of streamingtabel.
- Vermeldingen in het gebeurtenislogboek bevatten nu de eigenschap
maturity
om de stabiliteit van het gebeurtenisschema aan te geven. Mogelijke waarden zijnstable
,evolving
endeprecated
. Voor meer informatie over het gebeurtenislogboek van Delta Live Tables, zie Wat is het gebeurtenislogboek van Delta Live Tables?.
- Het foutbericht wordt verbeterd wanneer er incompatibele wijzigingen worden aangebracht in brontabellen die door een streamingtabel worden gebruikt.
- U kunt nu een clusterbeleid selecteren in de gebruikersinterface van Delta Live Tables wanneer u een pijplijn maakt of bewerkt. Eerder moest het clusterbeleid voor een pijplijn worden ingesteld om de JSON-instellingen van de pijplijn te bewerken.
- Sneller pijplijn opstarten. Deze release bevat verbeteringen die de
SETTING_UP_TABLES
stap versnellen wanneer een pijplijn wordt gestart.
Opgeloste fouten in deze release
- In deze release wordt een fout opgelost waardoor verbeterde automatische schaalaanpassing niet omhoog kan worden geschaald wanneer er geen niet-actieve clusterexemplaren beschikbaar zijn.