Sdílet prostřednictvím

Co je úloha Apache Airflow?

  • Článek

Poznámka:

Úloha Apache Airflow využívá Apache Airflow.

Úloha Apache Airflow je nová generace Správce orchestrace pracovních postupů služby Azure Data Factory. Je to jednoduchý a efektivní způsob, jak vytvářet a spravovat úlohy orchestrace Apache Airflow , což umožňuje snadno spouštět řízené Acyklické grafy (DAG) ve velkém měřítku. Je to součást služby Data Factory fabric, která vám umožňuje moderní prostředí integrace dat přijímat, připravovat a transformovat data z bohaté sady zdrojů dat, jako jsou databáze, datový sklad, Lakehouse, data v reálném čase a další.

Kdy použít úlohu Apache Airflow?

Úlohy Apache Airflow nabízejí spravovanou službu, která uživatelům umožňuje vytvářet a spravovat skupiny DAG založené na Pythonu (řízené acyklické grafy) pro orchestraci pracovních postupů, aniž by se museli starat o základní infrastrukturu. Pokud máte zkušenosti s Apache Airflow nebo dáváte přednost přístupu zaměřenému na kód, je tato možnost ideální. Pokud ale dáváte přednost řešení bez kódu pro orchestraci dat, nabízejí datové kanály uživatelsky přívětivou alternativu, která nevyžaduje správu ani psaní pracovních postupů založených na Pythonu.

Klíčové funkce

Úloha Apache Airflow hostovaná v Microsoft Fabric nabízí celou řadu výkonných funkcí, mezi které patří:

Klíčové funkce Úloha Apache Airflow v prostředcích infrastruktury Správce orchestrace pracovních postupů ve službě Azure Data Factory
Synchronizace Gitu Ano Ano
Povolení AKV (Azure Key Vault) jako back-endu Ano Ano
Instalace privátního balíčku jako požadavku Ano Ano
Diagnostické protokoly a metriky No Ano
Blob Storage No Ano
IP adresa clusteru Apache Airflow Ano Ano
Automatické škálování pro správu špiček spouštění produkčních úloh Ano Částečná
Vysoká dostupnost pro zmírnění výpadků nebo výpadků Ano No
Operátory odložení pro pozastavení nečinných operátorů a uvolnění pracovních procesů Ano No
Pozastavení a obnovení hodnoty TTL (Time to Live) Ano No
SaaSified Experience – 10 sekund, které vám pomůžou začít – Vytváření dagů – Bezplatná zkušební verze prostředků infrastruktury Ano No

Dostupnost oblastí (Public Preview)

  • Austrálie – východ
  • Austrálie – jihovýchod
  • Brazílie – jih
  • Kanada – východ
  • Střední Kanada
  • Východní Asie
  • East US
  • Německo – středozápad
  • Japonsko – východ
  • Japonsko – západ
  • Severní Evropa
  • Jižní Afrika – sever
  • Středojižní USA
  • Indie – jih
  • Southeast Asia
  • Švédsko – střed
  • Švýcarsko – západ
  • Spojené království – jih
  • Spojené království – západ
  • USA – středozápad
  • West Europe
  • USA – západ

Podporované verze Apache Airflow

  • 2.6.3

Podpora verze Pythonu

  • 3.8.17

Poznámka:

Změna verze Apache Airflow v existujícím prostředí IR se nepodporuje. Místo toho doporučujeme vytvořit nové prostředí AIRflow IR s požadovanou verzí.

Související obsah