Problema conocido: Fabric Runtime 1.3 provoca bibliotecas no válidas
Fabric Runtime 1.3 incorpora Apache Spark 3.5. Spark 3.5 publicó una actualización importante el 15 de agosto de 2024 que provoca que las bibliotecas personalizadas instaladas en los entornos de Fabric no sean válidas. Al iniciar el cuaderno y las sesiones de definición de trabajos de Spark, se produce un error al usar un entorno no válido.
Estado: corregido: 7 de noviembre de 2024
Experiencia del producto: Ingeniería de datos
Síntomas
Cuando se ejecuta una nueva sesión de definición de trabajo de Spark o cuaderno con el entorno de Fabric Runtime 1.3, en el inicio de sesión de Spark se produce el error Spark_Ambiguous_SparkSubmit_PersonalizationFailed.
Soluciones y soluciones alternativas
Siga los pasos siguientes para resolver el problema:
- Vaya a la instancia de entorno con Runtime 1.3 en el área de trabajo.
- Realice cambios en la sección de bibliotecas según sea necesario en función de las dependencias de las bibliotecas.
- Guarde y vuelva a publicar el entorno. El entorno se vuelve a generar con la actualización más reciente del entorno de ejecución de Spark 3.5.