Bekend probleem: Spark-taken kunnen mislukken vanwege updates van runtime 1.3 voor algemene release
De Microsoft Fabric Runtime 1.3 op basis van Apache Spark 3.5 is op 23 september 2024 algemeen beschikbaar. Fabric Runtime 1.3 kan nu worden gebruikt voor productieworkloads. Als onderdeel van de overgang van openbare preview naar de fase voor algemene beschikbaarheid hebben we belangrijke ingebouwde bibliotheekupdates uitgebracht om de functionaliteit, beveiliging, betrouwbaarheid en prestaties te verbeteren. Deze updates kunnen van invloed zijn op uw Microsoft Fabric-omgevingen als u bibliotheken hebt geïnstalleerd of de ingebouwde bibliotheekversie hebt overschreven met Runtime 1.3.
Status: Open
Productervaring: Data Engineering
Symptomen
Als u de omgevingen met bibliotheken met Runtime 1.3 hebt geïnstalleerd, mislukt de Spark-taak met een fout die vergelijkbaar is met Post Personalization failed. Het importeren van geïnstalleerde aangepaste bibliotheken kan mislukken omdat de onderliggende ingebouwde bibliotheken worden bijgewerkt.
Oplossingen en tijdelijke oplossingen
Installeer de bibliotheken voor Fabric Runtime 1.3 opnieuw in uw Microsoft Fabric-omgevingen. Met de herinstallatie wordt de nieuwe afhankelijkheid gebouwd op basis van de meest recente updates. Als uw aangepaste bibliotheken incompatibele afhankelijkheden hebben van ingebouwde Python-pakketten, mislukt de installatie en wordt er een zelfopsporingslogboek gegenereerd met de lijst met vereiste versies. U kunt de afhankelijkheden bijwerken om uw aangepaste bibliotheken compatibel te maken. Er kunnen incompatibiliteiten of brekende veranderingen zijn in het bestaande notebook of de bestaande pijplijn, aangezien de onderliggende Python-pakketten zijn gewijzigd. U moet de code opnieuw bekijken om dit te verhelpen.