Integrera Dataflöden Gen2 och Pipelines i Microsoft Fabric
Dataflöden Gen2 är ett utmärkt alternativ för datatransformeringar i Microsoft Fabric. Kombinationen av dataflöden och pipelines är användbar när du behöver utföra ytterligare åtgärder på transformerade data.
Datapipelines är ett vanligt begrepp inom datateknik och erbjuder en mängd olika aktiviteter att orkestrera. Några vanliga aktiviteter är:
- Kopiera data
- Införliva dataflöde
- Lägg till notebook-fil
- Hämta metadata
- Köra ett skript eller en lagrad procedur
Pipelines ger ett visuellt sätt att slutföra aktiviteter i en viss ordning. Du kan använda ett dataflöde för datainmatning, transformering och landning i ett Fabric-datalager. Införliva sedan dataflödet i en pipeline för att samordna extra aktiviteter, till exempel köra skript eller lagrade procedurer när dataflödet har slutförts.
Pipelines kan också schemaläggas eller aktiveras av en utlösare för att köra ditt dataflöde. Genom att använda en pipeline för att köra dataflödet kan du få data uppdaterade när du behöver dem i stället för att behöva köra dataflödet manuellt. När du hanterar företagsdata eller ofta ändrar data kan du med automatisering fokusera på andra ansvarsområden.
