Overfør Spark-konfigurationer fra Azure Synapse Analytics til Fabric
Apache Spark indeholder mange konfigurationer, der kan tilpasses for at forbedre oplevelsen i forskellige scenarier. I Azure Synapse Spark- og Fabric-Dataudvikler ing har du fleksibiliteten til at inkorporere disse konfigurationer eller egenskaber for at skræddersy din oplevelse. I Fabric kan du føje Spark-konfigurationer til et miljø og bruge indbyggede Spark-egenskaber direkte i dine Spark-job. Hvis du vil flytte konfigurationer af Azure Synapse Spark-puljen til Fabric, skal du bruge et miljø.
Du kan finde oplysninger om spark-konfigurationsovervejelser i forskellene mellem Azure Synapse Spark og Fabric.
Forudsætninger
- Hvis du ikke allerede har et, kan du oprette et Fabric-arbejdsområde i din lejer.
- Hvis du ikke allerede har et, kan du oprette et miljø i dit arbejdsområde.
Mulighed 1: Føj Spark-konfigurationer til et brugerdefineret miljø
I et miljø kan du angive Spark-egenskaber, og disse konfigurationer anvendes på den valgte miljøgruppe.
- Åbn Synapse Studio: Log på Azure. Gå til dit Azure Synapse-arbejdsområde, og åbn Synapse Studio.
- Find Spark-konfigurationer:
- Gå til Administrer område, og vælg på Apache Spark-puljer.
- Find Apache Spark-puljen, vælg Apache Spark-konfigurationen , og find Spark-konfigurationsnavnet for gruppen.
- Hent Spark-konfigurationer: Du kan enten hente disse egenskaber ved at vælge Vis konfigurationer eller eksportere konfiguration (.txt/.conf/.json format) fra Konfigurationer + biblioteker>Apache Spark-konfigurationer.
- Når du har Spark-konfigurationer, kan du føje brugerdefinerede Spark-egenskaber til dit miljø i Fabric:
- I miljøet skal du gå til Egenskaber for Spark Compute>Spark.
- Tilføj Spark-konfigurationer. Du kan enten tilføje hver enkelt manuelt eller importere fra .yml.
- Klik på Gem og udgiv ændringer.
Få mere at vide om tilføjelse af Spark-konfigurationer til et miljø.