Dataingenjör dokumentation i Microsoft Fabric

Datateknik i Microsoft Fabric gör det möjligt för användare att utforma, bygga och underhålla infrastrukturer och system som gör det möjligt för deras organisationer att samla in, lagra, bearbeta och analysera stora mängder data.

Om Dataingenjör

Översikt

• Vad är datateknik?
• Vad är ett sjöhus?
• Arbetsyteroller och behörigheter

Kom igång med sjöhus

Kom igång

• Skapa ett sjöhus
• Navigera i Lakehouse Explorer

Instruktioner

• Hämta data till Lakehouse med hjälp av notebook-filen

Kom igång med notebook-filer

Kom igång

• Skapa och använda notebook-filer

Instruktioner

• Utveckla och köra notebook-filer
• Utforska lakehouse-data med en notebook-fil
• Visualisera notebook-filer
• Källkontroll och distribution av notebook-filer
• Använda NotebookUtils i notebook-fil
• Skapa och köra T-SQL Notebooks

API för GraphQL

Översikt

• Vad är Fabric API för GraphQL?

Kom igång

• Skapa ett API för GraphQL och lägg till data

Instruktioner

• Hantera relationer
• Anslut program
• Fråga flera datakällor

Data Lake

Koncept

• Lakehouse- och Delta-tabeller

Instruktioner

• Deltaoptimering och V-order
• Läs in till tabeller

Självstudie om Lakehouse från slutpunkt till slutpunkt

Koncept

• Översikt över Lakehouse-scenario

Självstudie

• Steg 1 – Skapa en arbetsyta
• Steg 2 – Skapa ett sjöhus
• Steg 3 – Mata in data i lakehouse
• Steg 4 – Transformera data till deltatabeller
• Steg 5 – Skapa en rapport
• Steg 6 – Rensa resurser

Apache Spark

Koncept

• Definition av Apache Spark-jobb
• Översikt över Spark-övervakning
• Apache Spark-rådgivare

Kom igång

• Skapa en Spark-jobbdefinition
• Skapa en Spark-jobbdefinition med ett Infrastruktur-API
• Git-integrering för Spark-jobbdefinition

Instruktioner

• Schemalägga och köra en Spark-jobbdefinition
• Övervaka ett Spark-program
• Hantera Apache Spark-bibliotek
• Så här använder du Infrastruktur MSSparkUtils
• Konfigurera kapacitetsinställningar

VS Code-integrering

Instruktioner

• Använda notebook-filer från VS Code
• Använda containeravbildning från VS Code
• Använda notebook-filer från VS Code med resurs
• Använda Spark-jobbdefinitioner från VS Code
• Utforska lakehouse från VS Code
• Utveckla notebook-fil från VS Code-webbupplevelsen

Kom igång med miljön

Kom igång

• Microsoft Fabric-miljöer

Instruktioner

• Hantera Spark-beräkning i miljöer
• Hantera bibliotek i miljöer
• Git-integrerings- och distributionspipeline för miljö
• Hantera miljön via offentliga API:er
• Hantera resurserna i infrastrukturmiljön
• Migrera befintliga arbetsytebibliotek och Spark-egenskaper till en miljö

Livy API

Översikt

• Vad är Livy-API:et?

Kom igång

• Skapa och köra Spark-jobb med livy-API:et
• Skicka Livy API-sessionsjobb
• Skicka Livy API-batchjobb