Del via

Hurtig start: Opret et Apache Airflow-job

  • Artikel

Bemærk

Apache Airflow-jobbet drives af Apache Airflow.
Apache Airflow er en åben kildekodeplatform, der bruges til programmeringsmæssigt at oprette, planlægge og overvåge komplekse job. Det giver dig mulighed for at definere et sæt opgaver, kaldet operatorer, der kan kombineres i styrede acycliske grafer (DAG'er) for at repræsentere datapipelines.

Apache Airflow Job er en enkel og effektiv måde at oprette og administrere Apache Airflow-miljøer på, så du nemt kan køre dine orkestreringsjob i stor skala. I denne hurtige introduktion opretter vi et simpelt Apache Airflow-job, der gør dig fortrolig med apache-luftflowjobbets miljø og funktioner.

Forudsætninger

  • Aktivér Apache Airflow-job i din lejer.

Bemærk

Da Apache Airflow-jobbet er i prøveversionstilstand, skal du aktivere det via din lejeradministrator. Hvis du allerede kan se Apache Airflow Job, har din lejeradministrator muligvis allerede aktiveret det.

  1. Gå til Administrationsportal –> Lejerindstillinger –> Under Microsoft Fabric –> Udvid afsnittet "Brugere kan oprette og bruge Apache Airflow Job (prøveversion)".
  2. Vælg Anvend.

Skærmbillede, der aktiverer Apache Airflow i lejeren.

Opret et Apache Airflow-job

  1. Du kan bruge et eksisterende arbejdsområde eller Oprette et nyt arbejdsområde.

  2. Udvid + New rulleliste –> Klik på Flere indstillinger –> Under Data Factory sektion –> Vælg Apache Airflow Job (prøveversion)

    Skærmbillede, der viser klik på flere indstillinger.

    Skærmbillede, hvor du kan vælge Apache Airflow Job.

  3. Giv projektet et passende navn, og klik på knappen "Opret".

Opret en DAG-fil

  1. Klik på kortet "Ny DAG-fil" –> giv navnet til filen, og klik på knappen "Opret".

    Skærmbillede, der navngiver DAG-filen.

  2. Du får vist en standard DAG-kode. Du kan redigere filen i henhold til dine krav.

    Skærmbillede, der viser standard dag-filen i Microsoft Fabric.

  3. Klik på "Gem ikon".

    Skærmbillede, der viser, hvordan du gemmer DAG-filen i Microsoft Fabric.

Kør en DAG

  1. Start med at klikke på knappen "Kør DAG".

    Skærmbillede, der kører DAG fra brugergrænsefladen for dataarbejdsprocesser.

  2. Når den er startet, vises der straks en meddelelse, der angiver, at DAG kører.

  3. Hvis du vil overvåge status for DAG-kørslen, skal du blot klikke på "Vis detaljer" i meddelelsescenteret. Denne handling omdirigerer dig til Apache Airflow-brugergrænsefladen, hvor du nemt kan spore status og detaljer for DAG-kørslen.

    Skærmbillede, der bruges til at navigere til Apache Airflow-brugergrænsefladen fra meddelelsescenter.

Overvåg din Apache Airflow DAG i Apache Airflow UI

De gemte dag-filer indlæses i Apache Airflow-brugergrænsefladen. Du kan overvåge dem ved at klikke på knappen "Overvåg i Apache Airflow".

Skærmbillede, der overvåger Airflow DAG.

Skærmbillede, der viser den indlæste Airflow-DAG.

Relateret indhold