Delen via

Delta Live Tables versie 2022.37

  • Artikel

14 - 22 september 2022

Deze functies en verbeteringen zijn uitgebracht met de release 2022.37 van Delta Live Tables.

Databricks Runtime-versies die door deze release worden gebruikt

Kanaal:

  • CURRENT (standaard): Databricks Runtime 10.3.7
  • PREVIEW: Databricks Runtime 11.0.5

Nieuwe functies en verbeteringen in deze release

  • De API-aanvraag voor de start-update retourneert nu het request_id veld in de hoofdtekst van het antwoord. De request_id is een stabiele id voor de oorspronkelijke aanvraag die de update start. Als een update opnieuw wordt geprobeerd of opnieuw wordt gestart, neemt de nieuwe update de request_idover.
{
  "update_id": "the ID of the update that was started",
  "request_id": "The ID of the request that started this update"
}

De nieuwe requests API-aanvraag (GET /pipelines/{pipeline_id}/requests/{request_id}) retourneert de status van de pijplijnupdate die is gekoppeld aan request_id. Het antwoord bevat informatie over de meest recente update.

{
   "status": "ACTIVE",
   "latest_update": {
   }
 }

  • Uw Python-code kan nu spark.sql bewerkingen buiten dlt.table() of dlt.view() functies aanroepen, zolang de bewerking niet wordt gelezen vanuit een gerealiseerde weergave of streamingtabel.

  • Vermeldingen in het gebeurtenislogboek bevatten nu de eigenschap maturity om de stabiliteit van het gebeurtenisschema aan te geven. Mogelijke waarden zijn stable, evolvingen deprecated. Voor meer informatie over het gebeurtenislogboek van Delta Live Tables, zie Wat is het gebeurtenislogboek van Delta Live Tables?.

  • Het foutbericht wordt verbeterd wanneer er incompatibele wijzigingen worden aangebracht in brontabellen die door een streamingtabel worden gebruikt.

  • U kunt nu een clusterbeleid selecteren in de gebruikersinterface van Delta Live Tables wanneer u een pijplijn maakt of bewerkt. Eerder moest het clusterbeleid voor een pijplijn worden ingesteld om de JSON-instellingen van de pijplijn te bewerken.

  • Sneller pijplijn opstarten. Deze release bevat verbeteringen die de SETTING_UP_TABLES stap versnellen wanneer een pijplijn wordt gestart.

Opgeloste fouten in deze release

  • In deze release wordt een fout opgelost waardoor verbeterde automatische schaalaanpassing niet omhoog kan worden geschaald wanneer er geen niet-actieve clusterexemplaren beschikbaar zijn.