Beperkingen voor Delta Live-tabellen
Hier volgen beperkingen van Delta Live Tables die belangrijk zijn om te weten wanneer u uw pijplijnen ontwikkelt:
- Een Azure Databricks-werkruimte is beperkt tot 100 gelijktijdige pijplijnupdates. Het aantal gegevenssets dat één pijplijn kan bevatten, wordt bepaald door de complexiteit van de pijplijnconfiguratie en workload.
- Gegevenssets van Delta Live Tables kunnen slechts één keer worden gedefinieerd. Daarom kunnen ze het doel zijn van slechts één bewerking in alle Delta Live Tables-pijplijnen. De uitzondering is streamingtabellen met toevoegstroomverwerking, waarmee u vanuit meerdere streamingbronnen naar de streamingtabel kunt schrijven. Zie Toevoegstroom gebruiken om vanuit meerdere bronstromen naar een streamingtabel te schrijven.
- Identiteitskolommen hebben de volgende beperkingen. Voor meer informatie over identiteitskolommen in Delta-tabellen, zie Identiteitskolommen gebruiken in Delta Lake.
- Identiteitskolommen worden niet ondersteund met tabellen die het doelwit zijn van WIJZIGINGEN TOEPASSEN verwerkingsproces.
- Identiteitskolommen kunnen opnieuw worden herberekend tijdens het bijwerken van gematerialiseerde weergaven. Daarom raadt Databricks aan om alleen identiteitskolommen in Delta Live Tables te gebruiken met streamingtabellen.
- Gegevenssets die zijn gemaakt in een Delta Live Tables-pijplijn, worden alleen geschreven naar Delta Lake. U kunt geen gegevens uitvoeren van een pijplijn naar niet-Delta Lake-sinks.
- Gerealiseerde weergaven en streamingtabellen, waaronder tabellen die zijn gemaakt door een Delta Live Tables-pijplijn of Databricks SQL, kunnen alleen worden geopend door Azure Databricks-clients en -toepassingen.
- U kunt Delta Sharing niet gebruiken om gerealiseerde weergaven en streamingtabellen te delen die zijn gemaakt met een Delta Live Tables-pijplijn.
- Er zijn beperkingen voor de Databricks-rekenkracht die nodig is om Unity Catalog-pijplijnen uit te voeren en er query's op uit te voeren. Zie de Vereisten voor pijplijnen die worden gepubliceerd in Unity Catalog.
- Alleen de eigenaar van de pijplijn heeft toegang tot het gebeurtenislogboek voor een pijplijn. Zie Het gebeurtenislogboek opvragen.
- Delta Lake time travel-query's worden alleen ondersteund met streamingtabellen en worden niet ondersteund met gerealiseerde weergaven. Zie Werken met Delta Lake-tabelgeschiedenis.
- U kunt Iceberg-lezingen niet inschakelen voor gematerialiseerde weergaven en streamingtabellen die gegenereerd zijn door Delta Live Tables-pijplijnen.