Känt problem – Spark-jobb kan misslyckas på grund av Runtime 1.3-uppdateringar för GA
Microsoft Fabric Runtime 1.3 baserat på Apache Spark 3.5 gick in i allmän tillgänglighet (GA) den 23 september 2024. Fabric Runtime 1.3 kan nu användas för produktionsarbetsbelastningar. Som en del av övergången från offentlig förhandsversion till den allmänna tillgänglighetsfasen släppte vi stora inbyggda biblioteksuppdateringar för att förbättra funktioner, säkerhet, tillförlitlighet och prestanda. Dessa uppdateringar kan påverka dina Microsoft Fabric-miljöer om du har installerat bibliotek eller åsidosatt den inbyggda biblioteksversionen med Runtime 1.3.
status: Öppen
produktupplevelse: datateknik
Symtom
Om du har installerat miljöer med bibliotek med Runtime 1.3 börjar Spark-jobbet misslyckas med ett fel som liknar Post Personalization failed. Importen av installerade anpassade bibliotek kan misslyckas på grund av att de underliggande inbyggda biblioteken uppdateras.
Lösningar och lösningar
Installera om biblioteken för Fabric Runtime 1.3 i dina Microsoft Fabric-miljöer. Ominstallationen skapar det nya beroendet baserat på de senaste uppdateringarna. Om dina anpassade bibliotek har inkompatibla beroenden för inbyggda Python-paket, misslyckas installationen och en självfelsöklogg genereras med listan över nödvändiga versioner. Du kan uppdatera beroendena för att göra dina anpassade bibliotek kompatibla. Det kan förekomma inkompatibiliteter eller icke-bakåtkompatibla ändringar i den befintliga notebooken eller pipelinen eftersom de underliggande Python-paketen har ändrats. Du måste gå tillbaka till koden för att minimera.