Azure Data Factory から Microsoft Fabric の Data Factory に移行する
この記事では、Azure Data Factory と Synapse Gen2 パイプライン作成者を対象にしています。 パイプラインの最新化と Microsoft Fabric 用 Data Factory への移行に役立つガイダンスと根拠が提供されます。
バックグラウンド
Microsoft Fabric は、セルフサービスと IT で管理されるエンタープライズ データの両方に対応する統合プラットフォームです。 データ量が急激に増加し、複雑さが増す中、Fabric のお客様は、最大の組織のすべてのユーザーがスケーリング、セキュリティで保護され、管理しやすく、アクセスできるエンタープライズ ソリューションを求めています。
近年、Microsoft は、スケーラブルなクラウド機能を顧客に提供するために多大な作業を投資しました。 そのため、Fabric の Data Factory は、数十年にわたって構築されたデータ統合開発者とデータ統合ソリューションの大規模なエコシステムで、前の世代で使用できる同等の機能をはるかに超える機能の完全なセットを使用できるようにします。
当然ながら、お客様は、Fabric 内でデータ統合ソリューションをホストすることで統合する機会があるかどうかを確認しています。 多くの場合、次のような質問をします。
- Fabric パイプラインでは、依存しているすべての機能が動作しますか?
- Fabric パイプラインでのみ使用できる機能は何ですか?
- 既存のパイプラインを Fabric パイプラインに移行する方法
- エンタープライズ データ インジェストに関する Microsoft のロードマップは何ですか?
これらの質問の多くに対する回答については、この記事で説明します。
注
Fabric 容量への移行の決定は、各顧客の要件によって異なります。 お客様は、情報に基づいた意思決定を行うために、他の利点を慎重に評価する必要があります。 Fabric パイプラインへの有機的な移行は時間の経過と共に予想されます。この意図は、各顧客が快適な条件で行われることです。
明確にするために、現在、データ インジェストのために Azure Data Factory または Synapse Gen2 を非推奨にする計画はありません。 エンタープライズ データ インジェスト用の Fabric パイプラインへの投資に重点を置く優先順位があるため、Fabric 容量によって提供される追加の価値は時間の経過と同時に増加します。 Fabric 容量を選択したお客様は、Microsoft Fabric 製品ロードマップとの連携の恩恵を受けることができます。
エンタープライズとセルフサービスのデータ統合のコンバージェンス
Fabric での項目の統合により、リソースを併置することで、検出、コラボレーション、管理が簡素化されます。 これにより、中央 IT チームは、一般的なセルフサービス項目をより簡単に統合しながら、データ系列や監視など、企業の標準に合わせてミッション クリティカルなデータ移動と変換サービスを運用化できます。
組織のコラボレーションとスケーラブルなニーズをサポートするために、Fabric パイプラインでは、メッセージを送信するための Office 365 と Teams のアクティビティ、Power BI セマンティック モデルのシームレスな更新、堅牢なガバナンス機能が導入され、組織がデータ系列とパイプラインの監視を管理するのに役立ちます。 Copilot を介した生成 AI の統合により、インテリジェントなパイプライン生成とエラー解決の説明を提供することで、パイプラインのエクスペリエンスがさらに向上し、複雑なソリューションの作成と管理が簡素化されます。
共通のプラットフォームを利用することで、ワークフローが合理化され、ビジネスと IT の間のソリューション開発が強化されます。 これにより、組織はデータ ソリューションをエンタープライズ レベルにスケーリングでき、大量のデータを管理する際の高いパフォーマンス、柔軟性、効率性が確保されます。
ファブリック容量
分散アーキテクチャにより、Fabric の容量は、全体的な負荷、一時的なスパイク、高いコンカレンシーに対する影響を受けにくいです。 容量を大規模なファブリック容量 SKU に統合することで、お客様はパフォーマンスとスループットを向上させることができます。
機能の比較
次の表は、Azure Data Factory と Fabric Data Factory でサポートされる機能の一覧です。
機能 | Azure Data Factory | ファブリックデータ工場 |
---|---|---|
パイプライン アクティビティ | ||
Office 365 および Teams アクティビティを使用すると、メッセージをシームレスに送信でき、組織全体での効率的なコミュニケーションとコラボレーションが容易になります。 | なし | あり |
データが一貫性を保って更新され、最新状態になることを確保するために、Power BI セマンティック モデルとデータフロー Gen2 への接続を作成します | なし | あり |
アタッチされたデータセット参照が存在し、かつ指定された条件を満たしているか、タイムアウトしたことを検証した後にのみ、パイプラインが実行を継続することを確保するパイプラインでの検証 | あり | あり1 |
SQL Server Integration Services (SSIS) パッケージを実行して、データ統合と変換の操作を実行する | あり | 予定 |
データ変換 | ||
マッピング データフローを持つ Apache Spark クラスターを使用して、グラフィカルインターフェイス経由でデータ変換プロセスを作成および管理する視覚的に設計されたデータ変換 | あり | なし2 |
Dataflow Gen2 の Power Query の直感的なグラフィカル インターフェースを用い、Fabric コンピューティング エンジンで視覚的に設計されたデータ変換を行う | なし | あり |
接続性 | ||
すべての Data Factory データ ソース のサポート | あり | 3 進行中 |
スケーラビリティ | ||
スケジュールされた実行を使用して、パイプライン内のアクティビティがシームレスに実行されるようにします | あり | はい |
柔軟で効率的なパイプライン管理のために、1 つのパイプラインに対して複数の実行をスケジュールする | あり | 対応予定 |
タンブリング ウィンドウ トリガーを使用して、重複しない個別の時間枠内でパイプラインの実行をスケジュールする | あり | 対応予定 |
特定または関連するイベントの発生に応答してパイプライン実行の実行を自動化するイベント トリガー | あり | あり4 |
人工知能 | ||
Copilot for Data Factory。複雑なパイプラインの理解を深めたり、エラー メッセージの提案を提供したりするために、データを簡単に取り込むためのインテリジェントなパイプライン生成と説明を提供します。 | なし | あり |
コンテンツ管理 | ||
データ系列ビューの。これは、ユーザーがパイプラインの依存関係を理解して評価するのに役立ちます | なし | はい |
コンテンツのライフサイクルを管理するデプロイ パイプライン | いいえ | はい |
プラットフォームのスケーラビリティとレジリエンス | ||
スケールとパフォーマンスの向上をサポートする Premium 容量 アーキテクチャ | いいえ | はい |
多国籍顧客が地域、業界特有または組織のデータ所在地要件に対処するのに役立つマルチジオ サポート | はい | あり |
セキュリティ | ||
仮想ネットワーク (仮想ネットワーク) データ ゲートウェイが接続。これにより、Fabric は組織の仮想ネットワークでシームレスに動作できます。 | なし | 対応予定 |
オンプレミス データ ゲートウェイの接続。これにより、組織のオンプレミス データ ソースと Fabric アイテム間のデータへの安全なアクセスが可能になります。 | なし | はい |
Azure サービス タグ サポート。これは、ネットワーク セキュリティ規則の更新や変更の複雑さを最小限に抑えるために自動的に管理される IP アドレスの定義済みのグループです。 | はい | はい |
ガバナンス | ||
コンテンツの承認。価値のある高品質な Fabric 項目を昇格または認定します | なし | あり |
Microsoft Purview の統合。Fabric 項目の管理と統制に役立ちます | あり | はい |
Microsoft Information Protection (MIP) 秘密度ラベル と Microsoft Defender for Cloud Apps との統合によるデータ損失防止 | いいえ | はい |
監視と診断ログ | ||
パイプライン実行イベントをイベント ストアにログ記録して、パイプラインのパフォーマンスを監視、分析、トラブルシューティングする | はい | 予定 |
監視ハブ。Fabric 項目の監視機能を提供します | いいえ | はい |
Microsoft Fabric Capacity Metrics アプリ。Fabric 容量の監視機能を提供します | いいえ | はい |
監査ログ。Fabric と Microsoft 365 全体のユーザー アクティビティを追跡します | いいえ | あり |
1 検証アクティビティの同等のメタデータ取得には、Get metadataアクティビティ、Until アクティビティ、および If condition アクティビティを使用します。
2 リモート パイプラインの呼び出し関数を使用してマッピング データ フロー アクティビティを実行する場合は、呼び出しパイプライン アクティビティのを参照してください。
3 データ パイプラインで現在サポートされているコネクタを表示するには、Pipeline のサポートを参照してください。
4 Fabric イベントストリームと Reflex を使用して実行イベントをトリガーする方法については、パイプライン イベント トリガー を参照してください。
考慮事項
Fabric パイプラインに移行する前に、計画に考慮すべきその他の考慮事項がいくつかあります。
ライセンス
ファブリック パイプラインでは、Premium 容量ワークスペースで作成するために少なくとも Microsoft Fabric (無料) ライセンスが必要です。詳細については、Fabric ライセンスを参照してください。
ロードマップ
Microsoft Fabric リリース 計画のドキュメントでは、Microsoft Fabric の Data Factory の新機能や計画内容など、機能が将来のリリースに向けて準備される際に、最新の更新プログラムとタイムラインをお客様に通知します。
詳細については、Microsoft Fabric リリース プランのドキュメントを参照してください。
関連コンテンツ
ADF から Fabric Data Factory への移行を計画する方法について説明します。