Schnellstart: Erstellen eines Apache Airflow-Auftrags
Hinweis
Ein Apache Airflow-Auftrag wird von Apache Airflow unterstützt.
Apache Airflow ist eine Open-Source-Plattform, die zum programmgesteuerten Erstellen, Planen und Überwachen komplexer Aufträge verwendet wird. Es ermöglicht Ihnen, eine Reihe von Aufgaben zu definieren, die als Operatoren bezeichnet werden und zu gerichteten azyklischen Graphen (Directed Acyclic Graphs, DAGs) kombiniert werden können, um Datenpipelines darzustellen.
Apache Airflow-Aufträge bieten einen einfachen und effizienten Weg, um Apache Airflow-Umgebungen zu erstellen und zu verwalten, sodass Sie Ihre Orchestrierungsaufträge in großem Stil problemlos ausführen können. In diesem Schnellstart erstellen wir einen einfachen Apache Airflow-Auftrag, sodass Sie sich mit der Umgebung und den Funktionen von Apache Airflow-Aufträgen vertraut machen können.
Voraussetzungen
- Aktivieren Sie den Apache Airflow-Auftrag in Ihrem Mandanten.
Hinweis
Da sich der Apache Airflow-Auftrag in der Vorschau befindet, müssen Sie ihn über Ihren Mandantenadministrator aktivieren. Wenn der Apache Airflow-Auftrag bereits angezeigt wird, hat Ihr Mandantenadministrator ihn möglicherweise bereits aktiviert.
- Gehen Sie zum Verwaltungsportal –> Mandanteneinstellungen –> Erweitern Sie unter Microsoft Fabric –> den Abschnitt „Benutzer können Apache Airflow-Aufträge erstellen und verwenden (Vorschau)“.
- Wählen Sie Übernehmen.
Erstellen eines Apache Airflow-Auftrags
Sie können einen vorhandenen Arbeitsbereich verwenden oder einen Neuen Arbeitsbereich erstellen.
Erweitern Sie das
+ New
Dropdown – > Klicken Sie auf Weitere Optionen –> Wählen Sie unter dem AbschnittData Factory
–> Apache Airflow-Auftrag (Vorschau) ausGeben Sie Ihrem Projekt einen geeigneten Namen und klicken Sie auf die Schaltfläche Erstellen.
Erstellen einer DAG-Datei
Klicken Sie auf die Karte Neue DAG-Datei – > geben Sie der Datei den Namen, und klicken Sie auf die Schaltfläche Erstellen.
Ihnen wird ein DAG-Code mit Textbausteinen angezeigt. Sie können die Datei nach Ihren Wünschen bearbeiten.
Klicken Sie auf das Symbol „Speichern“.
Ausführen einer DAG
Klicken Sie zunächst auf die Schaltfläche DAG ausführen.
Nach dem Initiieren wird eine Benachrichtigung angezeigt, die angibt, dass die DAG ausgeführt wird.
Um den Fortschritt der DAG-Ausführung zu überwachen, klicken Sie einfach im Benachrichtigungscenter auf Details anzeigen. Diese Aktion leitet Sie zur Apache Airflow UI um, wo Sie bequem den Status und Details der DAG-Ausführung nachverfolgen können.
Überwachen des Apache Airflow-DAG in der Benutzeroberfläche von Apache Airflow
Die gespeicherten Dag-Dateien werden in der Apache Airflow-Benutzeroberfläche geladen. Sie können sie überwachen, indem Sie auf die Schaltfläche „In Apache Airflow überwachen“ klicken.