Del via

Hurtigstart: Opprette en Apache Airflow-jobb

  • Artikkel

Merk

Apache Airflow-jobben drives av Apache Airflow.
Apache Airflow er en åpen kildekode-plattform som brukes til programmatisk å opprette, planlegge og overvåke komplekse jobber. Den lar deg definere et sett med oppgaver, kalt operatorer, som kan kombineres til rettet acykliske grafer (DAGs) for å representere datasamlebånd.

Apache Airflow Job gir en enkel og effektiv måte å opprette og administrere Apache Airflow-miljøer på, slik at du enkelt kan kjøre orkestreringsjobbene dine i stor skala. I denne hurtigstarten kan vi opprette en enkel Apache Airflow-jobb for å gjøre deg kjent med miljøet og funksjonaliteten til Apache Airflow Job.

Forutsetning

  • Aktiver Apache Airflow-jobb i leieren.

Merk

Siden Apache Airflow-jobben er i forhåndsvisningstilstand, må du aktivere den gjennom leieradministratoren. Hvis du allerede ser Apache Airflow Job, kan det hende at leieradministratoren allerede har aktivert den.

  1. Gå til administrasjonsportalen –> Leierinnstillinger –> Under Microsoft Fabric –> Utvid inndelingen «Brukere kan opprette og bruke Apache Airflow Job (forhåndsversjon)».
  2. Velg Bruk.

Skjermbilde for å aktivere Apache Airflow i tenant.

Opprett en Apache Airflow-jobb

  1. Du kan bruke et eksisterende arbeidsområde eller opprette et nytt arbeidsområde.

  2. Utvid + New rullegardinlisten –> Klikk på Flere alternativer –> Under Data Factory inndeling –> Velg Apache Airflow Job (forhåndsversjon)

    Skjermbilde som viser klikk på flere alternativer.

    Skjermbilde for å velge Apache Airflow Job.

  3. Gi prosjektet et passende navn, og klikk opprett-knappen.

Opprette en DAG-fil

  1. Klikk på «Ny DAG-fil»-kort –> gi navnet til filen, og klikk på «Opprett»-knappen.

    Skjermbilde for å gi navn til DAG-filen.

  2. En standard DAG-kode presenteres for deg. Du kan redigere filen i henhold til kravene dine.

    Skjermbilde presenterer standard DAG-fil i Microsoft Fabric.

  3. Klikk lagre-ikonet.

    Skjermbilde som viser hvordan du lagrer DAG-filen i Microsoft Fabric.

Kjør en DAG

  1. Begynn med å klikke på Kjør DAG-knappen.

    Skjermbilde for å kjøre DAG fra brukergrensesnittet for dataarbeidsflyter.

  2. Når det er startet, vises det umiddelbart et varsel som angir at DAG kjører.

  3. Hvis du vil overvåke fremdriften for DAG-kjøringen, klikker du ganske enkelt på «Vis detaljer» i varslingssenteret. Denne handlingen omdirigerer deg til Apache Airflow-brukergrensesnittet, der du enkelt kan spore statusen og detaljene for DAG-kjøringen.

    Skjermbilde for å navigere til Apache Airflow UI fra varslingssenteret.

Overvåk Apache Airflow DAG i Apache Airflow UI

De lagrede dag-filene lastes inn i Apache Airflow-brukergrensesnittet. Du kan overvåke dem ved å klikke på «Monitor in Apache Airflow»-knappen.

Skjermbilde for å overvåke Airflow DAG.

Skjermbilde som presenterer den lastede Airflow DAG.

Relatert innhold