Delen via

Wat is Een Apache Airflow-taak?

  • Artikel

Notitie

Apache Airflow-taak wordt mogelijk gemaakt door Apache Airflow.

Apache Airflow-taak is de volgende generatie werkstroomindelingsbeheer van Azure Data Factory. Het is een eenvoudige en efficiënte manier om apache Airflow-indelingstaken te maken en te beheren, zodat u met gemak Gerichte Acyclic Graphs (DAG's) op schaal kunt uitvoeren. Het is het onderdeel van De Data Factory van Fabric waarmee u een moderne ervaring voor gegevensintegratie kunt gebruiken voor het opnemen, voorbereiden en transformeren van gegevens uit een uitgebreide set gegevensbronnen, zoals databases, datawarehouse, Lakehouse, realtime gegevens en meer.

Wanneer gebruikt u de Apache Airflow-taak?

Apache Airflow-taken bieden een beheerde service waarmee gebruikers DAG's op basis van Python (Directed Acyclic Graphs) kunnen maken en beheren voor werkstroomindeling, zonder dat ze zich zorgen hoeven te maken over de onderliggende infrastructuur. Als u ervaring hebt met Apache Airflow of de voorkeur geeft aan codegerichte benadering, is deze optie ideaal. Als u daarentegen de voorkeur geeft aan een oplossing zonder code voor gegevensindeling, bieden gegevenspijplijnen een gebruiksvriendelijk alternatief waarvoor geen op Python gebaseerde werkstromen hoeven te worden beheerd of geschreven.

Belangrijke functies

De gehoste Apache Airflow-taak van Microsoft Fabric biedt een reeks krachtige functies, waaronder:

Belangrijke functies Apache Airflow-taak in Fabric Werkstroomindelingsbeheer in Azure Data Factory
Git-synchronisatie Ja Ja
AKV (Azure Key Vault) inschakelen als back-end Ja Ja
Privépakket installeren als vereiste Ja Ja
Diagnostische logboeken en metrische gegevens Nr. Ja
Blob Storage Nr. Ja
IP-adres van Apache Airflow-cluster Ja Ja
Automatische schaalaanpassing voor het beheren van pieken in de uitvoering van productieworkloads Ja Gedeeltelijk
Hoge beschikbaarheid voor het beperken van storingen/downtime Ja Nr.
Uitgestelde operators voor het onderbreken van niet-actieve operators en het vrijmaken van werknemers Ja Nr.
TTL onderbreken en hervatten (Time to live) Ja Nr.
SaaSified Experience - 10 seconden om aan de slag te gaan - Ontwerp-DAG's - Gratis proefversie van Fabric Ja Nr.

Beschikbaarheid van regio's (openbare preview)

  • Australië - oost
  • Australië - zuidoost
  • Brazilië - zuid
  • Canada - oost
  • Canada - midden
  • Azië - oost
  • VS - oost
  • Duitsland - west-centraal
  • Japan - oost
  • Japan - west
  • Europa - noord
  • Zuid-Afrika - noord
  • VS - zuid-centraal
  • India - zuid
  • Azië - zuidoost
  • Zweden - centraal
  • Zwitserland - west
  • Verenigd Koninkrijk Zuid
  • Verenigd Koninkrijk West
  • VS - west-centraal
  • Europa -west
  • VS - west

Ondersteunde Apache Airflow-versies

  • 2.6.3

Ondersteuning voor Python-versie

  • 3.8.17

Notitie

Het wijzigen van de Apache Airflow-versie binnen een bestaande IR wordt niet ondersteund. In plaats daarvan is de aanbevolen oplossing om een nieuwe Airflow IR te maken met de gewenste versie

Gerelateerde inhoud