Dela via

Migrera Spark-bibliotek från Azure Synapse till Fabric

  • Artikel

Azure Synapse Spark-poolen erbjuder olika alternativ för feed och anpassade bibliotek. I Infrastruktur levereras varje körning med en förinstallerad uppsättning bibliotek (inbyggda bibliotek). Men baserat på dina scenarier och specifika behov kan du även inkludera andra bibliotek med hjälp av miljöbibliotek och infogade bibliotek. Om du vill flytta Azure Synapse Spark-poolbibliotek till Infrastruktur använder du miljöbibliotek.

Information om Spark-bibliotek finns i skillnader mellan Azure Synapse Spark och Fabric.

Förutsättningar

  • Om du inte redan har en skapar du en Infrastruktur-arbetsyta i klientorganisationen.
  • Om du inte redan har en skapar du en miljö på din arbetsyta.

Alternativ 1: Lägga till Spark-bibliotek i anpassad miljö

Du kan flytta Spark-poolbibliotek till en miljö på följande sätt:

  1. Öppna Synapse Studio: Logga in i Azure. Gå till din Azure Synapse-arbetsyta och öppna Synapse Studio.
  2. Leta upp Spark-bibliotek:
    • Gå till Hantera område och välj i Apache Spark-pooler.
    • Leta upp Apache Spark-poolen, välj Paket och leta upp Spark-biblioteken för poolen.
  3. Hämta Spark-bibliotek: Leta upp de requirements.txt-, environment.yml- eller arbetsytepaket som är installerade i poolen. Hämta listan över installerade bibliotek i poolen.
  4. När du har Spark-bibliotek lägger du till anpassade Spark-bibliotek i en miljö i Fabric. I din miljö går du till Bibliotek och lägger till bibliotek:
    • Från offentliga bibliotek kan du ladda upp en .yml fil. Du kan också installera bibliotek med PyPI och Conda.
    • Från Anpassade bibliotek kan du installera bibliotek med hjälp av .jar/.whl/.tar.gz-filer.
  5. Klicka på Spara och publicera ändringar.

Skärmbild som visar Spark-bibliotek.

Läs mer om att lägga till Spark-bibliotek i en miljö.

Kommentar

Observera att biblioteksinstallationen kan ta lite tid.

Relaterat innehåll