Получение от Фабрика данных Azure до фабрики данных в Microsoft Fabric
Фабрика данных в Microsoft Fabric — это следующее поколение Фабрика данных Azure который предоставляет службы перемещения данных в облаке и преобразования данных, которые позволяют решать самые сложные сценарии ETL. Это предназначено для упрощения использования, мощного и действительно корпоративного уровня. В этой статье сравниваются различия между Фабрика данных Azure и фабрикой данных в Microsoft Fabric.
Сопоставление функций
В современном интерфейсе Фабрики данных в Fabric существуют некоторые различные понятия по сравнению с Фабрика данных Azure. Сопоставление подробных функций представлено в таблице ниже.
Azure Data Factory | Фабрика данных в Fabric | Description |
---|---|---|
Pipeline | Конвейер данных | Конвейер данных в Fabric лучше интегрирован с унифицированной платформой данных, включая Lakehouse, Datawarehouse и многое другое. |
Сопоставление потока данных | Поток данных 2-го поколения | Поток данных 2-го поколения упрощает создание преобразования. Мы работаем с предоставлением дополнительных функций сопоставления потоков данных, поддерживаемых в Dataflow 2-го поколения |
Процедуры | Процедуры | Мы работаем, чтобы сделать больше действий ADF, поддерживаемых в Фабрике данных в Fabric. Фабрика данных в Fabric также имеет некоторые новые действия, такие как Office 365 Outlook. Подробные сведения см. в обзоре действий. |
Набор данных | Н/Д | Фабрика данных в Fabric не имеет концепций набора данных. Подключение будет использоваться для подключения каждого источника данных и извлечения данных. |
Связанные службы | Связи | Подключения имеют аналогичные функции, как связанная служба, но подключения в Fabric имеют более интуитивно понятный способ создания. |
Триггеры | Планирование триггеров и триггеров событий файлов | Структура может использовать события планировщика и рефлектора для автоматического запуска конвейеров. Триггеры событий файлов поддерживаются изначально в конвейерах в Фабрике данных Microsoft Fabric. |
Публикация | Сохранение, запуск | Для конвейера в Fabric не нужно публиковать содержимое. Вместо этого можно использовать кнопку "Сохранить", чтобы сохранить содержимое напрямую. При нажатии кнопки "Выполнить" содержимое будет сохранено перед запуском конвейера. |
Автоматическое выполнение и среда выполнения интеграции Azure | Н/Д | В Fabric у нас нет концепции среды выполнения интеграции. |
Локальная среда выполнения интеграции | Локальный шлюз данных | Локальный шлюз данных обеспечивает доступ к локальным данным через фабрику данных Fabric. Сведения о том, как получить доступ к локальным источникам данных в Фабрике данных для Microsoft Fabric. |
Среды выполнения интеграции Azure-SSIS | Не определено | Возможность в Fabric не подтвердила стратегию развития и разработку. |
MVNet и частная конечная точка | Не определено | Возможность в Fabric не подтвердила стратегию развития и разработку. |
Язык выражений | Язык выражений | Язык выражений похож на ADF и Fabric. |
Тип проверки подлинности в связанной службе | Тип проверки подлинности в соединении | Тип проверки подлинности в конвейере Fabric уже поддерживает популярные типы проверки подлинности в ADF, а дополнительные типы проверки подлинности будут добавлены. |
CI/CD | CI/CD | Возможность CI/CD в Фабрике данных Fabric скоро появится. |
Экспорт и импорт ARM | Save as | Сохранение как доступно в конвейере Fabric для дублирования конвейера. |
Наблюдение | Мониторинг, журнал выполнения | Центр мониторинга в Fabric имеет более сложные функции и современные возможности, такие как мониторинг в разных рабочих областях для улучшения аналитических сведений. |
Конвейер данных фабрики данных в Microsoft Fabric
В Фабрике данных Microsoft Fabric существует множество интересных функций конвейера данных. Используя эти функции, вы можете чувствовать силу конвейера в Fabric.
Интеграция Lakehouse/Datawarehouse
Lakehouse и хранилище данных доступны в качестве источника и назначения в Конвейере Fabric, поэтому очень удобно создавать собственные проекты, интегрированные с Lakehouse и Datawarehouse.
Действие Outlook Office 365
Действие Outlook Office 365 обеспечивает интуитивно понятный и простой способ отправки настраиваемых уведомлений по электронной почте о сведениях о конвейере и действиях, а также выходных данных конвейера по простой конфигурации.
Получение интерфейса с данными
Современный и простой интерфейс получения данных предоставляется в Фабрике данных в Fabric, поэтому вы можете настроить конвейер копирования и создать новое подключение.
Современный интерфейс мониторинга
С помощью объединенных возможностей концентратора мониторинга и элементов фабрики данных, таких как потоки данных и конвейеры данных, мы можем получить полное представление обо всех рабочих нагрузках и детализировать любые действия в рамках процесса фабрики данных. Кроме того, удобно выполнять анализ между рабочими областями с помощью центра мониторинга.
Результаты мониторинга копирования конвейера предоставляют подробные сведения о действие Copy. Нажав кнопку сведений о выполнении (с выделенным значком очков), чтобы просмотреть сведения о выполнении. Разверните разбивку по длительности, вы можете знать длительность каждого этапа в действии копирования.
Save as
Сохранение как в конвейере Fabric обеспечивает удобный способ дублирования существующего конвейера в других целях разработки.