Kjent problem – Spark-jobber kan mislykkes på grunn av Runtime 1.3-oppdateringer for GA
Microsoft Fabric Runtime 1.3 basert på Apache Spark 3.5 gikk inn i generell tilgjengelighet (GA) den 23. september 2024. Fabric Runtime 1.3 kan nå brukes til produksjonsarbeidsbelastninger. Som en del av overgangen fra offentlig forhåndsvisning til den generelle tilgjengelighetsfasen, lanserte vi store innebygde bibliotekoppdateringer for å forbedre funksjonalitet, sikkerhet, pålitelighet og ytelse. Disse oppdateringene kan påvirke Microsoft Fabric-miljøene dine hvis du installerte biblioteker eller overstyrte den innebygde bibliotekversjonen med Runtime 1.3.
status: åpne
produktopplevelse: datateknikk
Symptomer
Hvis du installerte miljøene med biblioteker med Runtime 1.3, begynner Spark-jobben å mislykkes med en feil som ligner på Post Personalization failed. Import av installerte egendefinerte biblioteker kan mislykkes på grunn av at de underliggende innebygde bibliotekene oppdateres.
Løsninger og midlertidige løsninger
Installer bibliotekene for Fabric Runtime 1.3 på nytt i Microsoft Fabric-miljøene. Ny installasjon bygger den nye avhengigheten basert på de nyeste oppdateringene. Hvis de egendefinerte bibliotekene har inkompatible avhengigheter av python-innebygde pakker, mislykkes installasjonen, og en selvsøkelogg genereres med listen over nødvendige versjoner. Du kan oppdatere avhengighetene for å gjøre de egendefinerte bibliotekene kompatible. Det kan være inkompatibiliteter eller brudd på endringer i den eksisterende notatblokken eller datasamlebåndet etter hvert som de underliggende Python-pakkene ble endret. Du må gå tilbake til koden for å redusere.