Microsoft Fabric でデータフロー Gen2 とパイプラインを統合する
データフロー Gen2 には、Microsoft Fabric でのデータ変換用に優れたオプションが用意されています。 データフローとパイプラインを組み合わせると、変換されたデータに対して追加の操作を実行する必要がある場合に便利です。
データ パイプラインはデータ エンジニアリングの一般的な概念であり、調整のためのさまざまなアクティビティを提供しています。 一般的なアクティビティには次のようなものがあります。
- データをコピーする
- データフローの組み込み
- ノートブックの追加
- メタデータの取得
- スクリプトまたはストアド プロシージャの実行
パイプラインを使用すると、アクティビティを特定の順序で視覚的に完了することができます。 データフローを使用して、データの取り込み、変換、Fabric データ ストアへの配置を実行できます。 次に、データフローをパイプラインに組み込むことで、データフローの完了後にスクリプトやストアド プロシージャの実行などの追加のアクティビティを調整できます。
パイプラインは、データフローを実行するためのトリガーによってもスケジュールや、アクティブ化ができます。 パイプラインを使用してデータフローを実行することで、データフローを手動で実行する必要なく、必要なときにデータを更新できます。 企業や頻繁に変化するデータを扱うときに、自動化を使用すると、他の職務に集中できます。