Migración de Azure Data Factory a Data Factory en Microsoft Fabric
Este artículo tiene como destino los creadores de canalizaciones de Azure Data Factory y Synapse Gen2. Proporciona instrucciones y justificaciones para ayudar a modernizar y migrar las canalizaciones a Data Factory para Microsoft Fabric.
Información previa
Microsoft Fabric es una plataforma integrada para datos empresariales tanto de autoservicio como gestionados por TI. Con un crecimiento exponencial en volúmenes de datos y complejidad, los clientes de Fabric exigen soluciones empresariales que se escalan, son seguras, fáciles de administrar y accesibles para todos los usuarios de la mayor parte de las organizaciones.
En los últimos años, Microsoft invertía un trabajo significativo para ofrecer funcionalidades escalables en la nube a los clientes. Para ello, Data Factory in Fabric permite a un gran ecosistema de desarrolladores de integración de datos y soluciones de integración de datos creadas durante décadas para usar el conjunto completo de características y funcionalidades que van mucho más allá de una funcionalidad comparable disponible en generaciones anteriores.
Naturalmente, los clientes preguntan si hay una oportunidad para consolidar hospedando sus soluciones de integración de datos en Fabric. A menudo hacen preguntas como:
- ¿Funciona toda la funcionalidad de la que dependemos en las canalizaciones de Fabric?
- ¿Qué funcionalidades solo están disponibles en las canalizaciones de Fabric?
- ¿Cómo se migran las canalizaciones existentes a canalizaciones de Fabric?
- ¿Cuál es la hoja de ruta de Microsoft para la ingesta de datos empresariales?
En este artículo se describen respuestas a muchas de estas preguntas.
Nota
La decisión de migrar a las capacidades de Fabric depende de los requisitos de cada cliente. Los clientes deben evaluar cuidadosamente otras ventajas para tomar una decisión informada. Esperamos ver la migración orgánica a canalizaciones de Fabric a lo largo del tiempo, y nuestra intención es que se produzca en términos con los que cada cliente se sienta cómodo. Para estar claro, actualmente no hay ningún plan para dejar de usar Azure Data Factory o Synapse Gen2 para la ingesta de datos. Hay una prioridad para centrar la inversión en canalizaciones de Fabric para la ingesta de datos empresariales, por lo que el valor adicional proporcionado por las capacidades de Fabric aumentará con el tiempo. Los clientes que eligen las capacidades de Fabric pueden esperar beneficiarse de la alineación con la hoja de ruta del producto de Microsoft Fabric.
Convergencia de la integración de datos empresariales y de autoservicio
La consolidación de elementos en Fabric simplifica la detección, la colaboración y la administración mediante la colocación de recursos. Esto permite a los equipos centrales de TI poner en funcionamiento los servicios de transformación y movimiento de datos críticos alineados con estándares corporativos, incluido el linaje y la supervisión de datos, a la vez que se integran más fácilmente los elementos populares de autoservicio.
Para admitir las necesidades colaborativas y escalables de las organizaciones, las canalizaciones de Fabric presentan actividades de Office 365 y Teams para enviar mensajes, actualizaciones sin problemas de modelos semánticos de Power BI y características de gobernanza sólidas, lo que ayuda a las organizaciones a administrar el linaje de datos y la supervisión de canalizaciones. La integración de ia generativa a través de Copilot mejora aún más la experiencia de canalización ofreciendo explicaciones inteligentes de generación de canalizaciones y resolución de errores, lo que simplifica la creación y administración de soluciones complejas.
Mediante el uso de una plataforma común, se simplifica el flujo de trabajo, lo que mejora el desarrollo de soluciones entre la empresa y TI. Esto permite a las organizaciones escalar sus soluciones de datos a niveles empresariales, lo que garantiza un alto rendimiento, flexibilidad y eficacia para administrar grandes cantidades de datos.
Capacidades de tejido
Debido a su arquitectura distribuida, las capacidades de Fabric son menos sensibles a la carga general, los picos temporales y la alta simultaneidad. Al consolidar las capacidades en SKU de capacidad de Fabric más grandes, los clientes pueden lograr un mayor rendimiento y capacidad de procesamiento. Consulte Optimizar capacidades de Fabric para obtener más información.
Comparación de características
En la tabla siguiente se enumeran las características admitidas en Azure Data Factory y Fabric Data Factory.
| Característica | Azure Data Factory | Fábrica de Datos de Fabric |
|---|---|---|
| Actividades de canalización | ||
| Las actividades en de Office 365 y Teams le permiten enviar mensajes de manera fluida, facilitando la comunicación y la colaboración eficaces en toda la organización. | No | Sí |
| Cree conexiones con su Modelo semántico de Power BI y Flujo de datos Gen2 para asegurarse de que sus datos se actualicen de forma consistente | No | Sí |
| Validación en una canalización para asegurarse de que la canalización solo continúa la ejecución una vez que valida que existe la referencia del conjunto de datos adjunto, que cumple los criterios especificados o agota el tiempo de espera | Sí | Sí1 |
| Ejecutar un paquete de SQL Server Integration Services (SSIS) para realizar operaciones de integración y transformación de datos | Sí | Programado |
| Transformación de datos | ||
| Transformaciones de datos diseñadas visualmente mediante clústeres de Apache Spark con Mapping Dataflows para crear y administrar procesos de transformación de datos mediante una interfaz gráfica. | Sí | No2 |
| Transformaciones de datos diseñadas visualmente usando el motor de cálculo Fabric con una interfaz gráfica intuitiva de Power Query en Dataflow Gen2 | No | Sí |
| Conectividad | ||
| Compatibilidad con todos los orígenes de datos de Data Factory | Sí | En curso3 |
| Escalabilidad | ||
| Garantizar la ejecución sin problemas de las actividades en una canalización con ejecuciones programadas | Sí | Sí |
| Programar múltiples ejecuciones para una única tubería para una gestión de tuberías flexible y eficaz | Sí | Planeada |
| Utiliza ventanas de saltos de tamaño constante para programar ejecuciones de canalización dentro de ventanas de tiempo distintas y no superpuestas | Sí | Planeada |
| Activadores de eventos para automatizar la ejecución de ejecuciones de canalización en respuesta a ocurrencias de eventos específicas o pertinentes | Sí | Sí4 |
| Inteligencia artificial | ||
| Copilot para Data Factory, que proporciona generación de canalización inteligente para ingerir datos con facilidad y explicaciones para ayudar a comprender mejor las canalizaciones complejas o proporcionar sugerencias para los mensajes de error | No | Sí |
| Administración de contenido | ||
| Vista de linaje de datos, que ayuda a los usuarios a comprender y evaluar las dependencias de canalización | Sí | Sí |
| Canalizaciones de implementación, que administran el ciclo de vida del contenido de Fabric | Sí | Sí |
| escalabilidad y resistencia de la plataforma | ||
| Arquitectura de capacidad Premium, que admite una mayor escalabilidad y rendimiento | Sí | Sí |
| Compatibilidad con Multi-Geo, que ayuda a los clientes multinacionales a abordar los requisitos de residencia de datos regionales, específicos del sector o de la organización | Sí | Sí |
| Seguridad | ||
| Conectividad de puerta de enlace de datos de red virtual, lo que permite que Fabric funcione sin problemas en la red virtual de una organización | No | Planeada |
| Conectividad de puerta de enlace de datos local, lo que permite el acceso seguro de los datos entre los orígenes de datos locales de una organización y Fabric | No (utiliza el entorno de ejecución de integración autohospedado (SHIR)) | Sí |
| Compatibilidad con las etiquetas de servicio de Azure , que son un grupo definido de direcciones IP gestionado automáticamente para minimizar la complejidad de las actualizaciones o cambios en las reglas de seguridad de red. | Sí | Sí |
| Gobernanza | ||
| Contenido aprobado, para promover o certificar artículos valiosos de Fabric de alta calidad | No | Sí |
| Integración de Microsoft Purview, que ayuda a los clientes a administrar y controlar los elementos de Fabric | Sí | Sí |
| Microsoft Information Protection (MIP) etiquetas de confidencialidad e integración con Microsoft Defender for Cloud Apps para la prevención de pérdida de datos | No | Sí |
| Registro de supervisión y diagnóstico | ||
| Registro de eventos de ejecución de canalizaciones en un almacén de eventos para supervisar, analizar y solucionar problemas en el rendimiento de las canalizaciones. | Sí | Programado |
| Centro de supervisión, que proporciona funcionalidades de supervisión para los elementos de Fabric | No | Sí |
| Aplicación de métricas de capacidad de Microsoft Fabric, que proporciona funcionalidades de supervisión para las capacidades de Fabric | No | Sí |
| Registro de auditoría, que realiza un seguimiento de las actividades del usuario en Fabric y Microsoft 365 | No | Sí |
1 Utiliza las actividades condicionales Obtener metadatos, Hasta que y Si para la recuperación equivalente de metadatos de la actividad de Validación.
2 Utiliza la función de invocar canalización remota para ejecutar las actividades del flujo de datos de asignación, consulta la compatibilidad de la canalización.
3 Para ver los conectores que se admiten actualmente para las canalizaciones de datos, consulte Compatibilidad con canalizaciones.
4 Utilizar secuencias de eventos de Fabric y Reflex para activar eventos de ejecución, consulte Desencadenadores de eventos de canalización.
Consideraciones
Hay otras consideraciones que debe tener en cuenta en la planeación antes de migrar a canalizaciones de Fabric.
Licenciamiento
Las canalizaciones de Fabric requieren, como mínimo, una licencia de Microsoft Fabric (gratis) para crear en un área de trabajo de capacidad premium, para obtener más información, consulte licencias de Fabric.
Hoja de ruta
La documentación del plan de versión de Microsoft Fabric anuncia a los clientes las actualizaciones y los plazos más recientes a medida que las características se preparan para futuras versiones, incluidas las novedades que se planean para Data Factory en Microsoft Fabric.
Para obtener más información, consulte la Documentación del plan de lanzamiento de Microsoft Fabric.
Contenido relacionado
Aprenda a planear la migración de ADF a Fabric Data Factory.