Integrieren von Dataflows Gen2 und Pipelines in Microsoft Fabric
Dataflows Gen2 stellen eine hervorragende Option für Datentransformationen in Microsoft Fabric dar. Die Kombination aus Dataflows und Pipelines ist nützlich, wenn Sie zusätzliche Vorgänge für die transformierten Daten ausführen müssen.
Datenpipelines sind ein gängiges Datentechnikkonzept und bieten verschiedenste Orchestrierungsaktivitäten. Beispiele für gängige Aktivitäten:
- Kopieren von Daten
- Dataflows integrieren
- Notebooks hinzufügen
- Metadaten abrufen
- Skripts oder gespeicherte Prozeduren ausführen
Mit Pipelines können Aktivitäten visualisiert und in einer bestimmten Reihenfolge erledigt werden. Mit einem Datenflow können Sie Daten erfassen, transformieren und an einen Fabric-Datenspeicher übertragen. Integrieren Sie den Dataflow dann in eine Pipeline, um zusätzliche Aktivitäten zu orchestrieren, z. B. die Ausführung von Skripts oder gespeicherten Prozeduren, nachdem der Dataflow abgeschlossen ist.
Pipelines können auch über einen Auslöser geplant oder aktiviert werden, um Ihren Dataflow auszuführen. Wenn Sie eine Pipeline zum Ausführen des Dataflows verwenden, können Sie die Daten aktualisieren lassen, wenn Sie sie benötigen, anstatt den Dataflow manuell ausführen zu müssen. Wenn Sie mit Unternehmensdaten arbeiten oder mit Daten, die sich häufig ändern, können Sie sich dank der Automation auf andere Aufgaben konzentrieren.
