Bekend probleem: Spark-taken kunnen mislukken vanwege runtime 1.3-updates voor algemene beschikbaarheid
De Microsoft Fabric Runtime 1.3 op basis van Apache Spark 3.5 is op 23 september 2024 algemeen beschikbaar. Fabric Runtime 1.3 kan nu worden gebruikt voor productieworkloads. Als onderdeel van de overgang van openbare preview naar de fase voor algemene beschikbaarheid hebben we belangrijke ingebouwde bibliotheekupdates uitgebracht om de functionaliteit, beveiliging, betrouwbaarheid en prestaties te verbeteren. Deze updates kunnen van invloed zijn op uw Microsoft Fabric-omgevingen als u bibliotheken hebt geïnstalleerd of de ingebouwde bibliotheekversie hebt overschreven met Runtime 1.3.
Status: Openen
Productervaring: Data-engineer ing
Symptomen
Als u de omgevingen met bibliotheken met Runtime 1.3 hebt geïnstalleerd, mislukt de Spark-taak met een fout die vergelijkbaar is met Post Personalization failed. Het importeren van geïnstalleerde aangepaste bibliotheken kan mislukken omdat de onderliggende ingebouwde bibliotheken worden bijgewerkt.
Oplossingen en tijdelijke oplossingen
Installeer de bibliotheken voor Fabric Runtime 1.3 opnieuw in uw Microsoft Fabric-omgevingen. Met de herinstallatie wordt de nieuwe afhankelijkheid gebouwd op basis van de meest recente updates. Als uw aangepaste bibliotheken incompatibele afhankelijkheden hebben van ingebouwde Python-pakketten, mislukt de installatie en wordt er een zelfopsporingslogboek gegenereerd met de lijst met vereiste versies. U kunt de afhankelijkheden bijwerken om uw aangepaste bibliotheken compatibel te maken. Er zijn mogelijk incompatibiliteit of belangrijke wijzigingen in het bestaande notebook of de bestaande pijplijn wanneer de onderliggende Python-pakketten zijn gewijzigd. U moet de code opnieuw bekijken om dit te verhelpen.