Kendt problem – Spark-job kan mislykkes på grund af runtime 1.3-opdateringer til ga
Microsoft Fabric Runtime 1.3, der er baseret på Apache Spark 3.5, blev offentligt tilgængelig den 23. september 2024. Fabric Runtime 1.3 kan nu bruges til produktionsarbejdsbelastninger. Som en del af overgangen fra offentlig prøveversion til fasen med generel tilgængelighed har vi udgivet større indbyggede biblioteksopdateringer for at forbedre funktionalitet, sikkerhed, pålidelighed og ydeevne. Disse opdateringer kan påvirke dine Microsoft Fabric-miljøer, hvis du har installeret biblioteker eller tilsidesat den indbyggede biblioteksversion med Runtime 1.3.
Status: Åben
Produktoplevelse: Dataudvikler ing
Symptomer
Hvis du har installeret miljøer med biblioteker med Runtime 1.3, begynder Spark-jobbet at mislykkes med en fejl, der ligner Post Personalization failed
. Import af installerede brugerdefinerede biblioteker kan mislykkes, fordi de underliggende indbyggede biblioteker opdateres.
Løsninger og løsninger
Geninstaller bibliotekerne til Fabric Runtime 1.3 i dine Microsoft Fabric-miljøer. Geninstallationen bygger den nye afhængighed baseret på de seneste opdateringer. Hvis dine brugerdefinerede biblioteker har inkompatible afhængigheder af indbyggede Python-pakker, mislykkes installationen, og der oprettes en selvfejlfindingslog med listen over påkrævede versioner. Du kan opdatere afhængighederne for at gøre dine brugerdefinerede biblioteker kompatible. Der kan være uoverensstemmelser eller afbrydelse af ændringer i den eksisterende notesbog eller pipeline, da de underliggende Python-pakker blev ændret. Du skal besøge koden igen for at afhjælpe problemet.