Migración de bibliotecas de Spark de Azure Synapse a Fabric
El grupo de Spark de Azure Synapse ofrece diferentes opciones de fuente y biblioteca personalizada. En Fabric, cada entorno de ejecución incluye un conjunto preinstalado de bibliotecas (bibliotecas integradas). Sin embargo, en función de sus escenarios y necesidades específicas, también puede incluir otras bibliotecas mediante las bibliotecas de entorno y las bibliotecas insertadas. Para mover las bibliotecas del grupo de Spark de Azure Synapse a Fabric, use bibliotecas de entorno.
Para más información sobre las bibliotecas de Spark, consulte las diferencias entre Spark para Azure Synapse y Fabric.
Requisitos previos
- Si aún no tiene una, cree un área de trabajo de Fabric en el inquilino.
- Si aún no tiene uno, cree un Entorno en el área de trabajo.
Opción 1: Agregar bibliotecas de Spark al entorno personalizado
Puede mover bibliotecas de grupos de Spark a un entorno de la siguiente manera:
- Abra Synapse Studio: inicie sesión en Azure. Vaya al área de trabajo de Azure Synapse y abra Synapse Studio.
- Localizar las bibliotecas de Spark:
- Vaya a Administrar área y seleccione Grupos de Apache Spark.
- Busque el grupo de Apache Spark, seleccione Paquetes y busque las bibliotecas de Spark del grupo.
- Obtener las bibliotecas de Spark: busque los paquetes requirements.txt, environment.yml o workspace instalados en el grupo. Obtenga la lista de las bibliotecas instaladas en el grupo.
- Una vez que tenga las bibliotecas de Spark, agregue bibliotecas personalizadas a un entorno en Fabric. En Entorno, vaya a Bibliotecas y agregue las bibliotecas:
- En Bibliotecas públicas, puede cargar un archivo .yml. También puede instalar bibliotecas mediante PyPI y Conda.
- En Bibliotecas personalizadas, puede instalar bibliotecas mediante archivos .jar/.whl/.tar.gz.
- Haga clic en Guardar y Publicar cambios.
Obtenga más información sobre cómo agregar bibliotecas de Spark a un Entorno.
Nota:
Tenga en cuenta que la instalación de la biblioteca puede tardar algún tiempo.