Del via

Overføre fra Azure Synapse Spark til Fabric

  • Artikkel

Før du begynner overføringen, bør du kontrollere at Fabric Dataingeniør ing er den beste løsningen for arbeidsbelastningen. Fabric Dataingeniør ing støtter lakehouse, notebook, miljø, Spark job definition (SJD) og data pipeline elementer, inkludert ulike runtime og Spark evner støtte.

Viktige hensyn

Det første trinnet i utformingen av en overføringsstrategi er å vurdere egnethet. Det er verdt å merke seg at visse Fabric-funksjoner relatert til Spark for tiden er under utvikling eller planlegging. Hvis du vil ha mer informasjon og oppdateringer, kan du gå til stoffveikartet.

Se en detaljert sammenligningsforskjell mellom Azure Synapse Spark og Fabric for Spark.

Overføringsscenarioer

Hvis du finner ut at Fabric Dataingeniør ing er det riktige valget for å overføre eksisterende Spark-arbeidsbelastninger, kan overføringsprosessen involvere flere scenarier og faser:

  • Elementer: Overføring av elementer innebærer overføring av ett eller forskjellige elementer fra det eksisterende Azure Synapse-arbeidsområdet til Fabric. Mer informasjon om overføring Spark-bassenger, Spark-konfigurasjoner, Spark-biblioteker, notatblokker og Spark-jobbdefinisjon.
  • Data og datasamlebånd: Ved hjelp av OneLake-snarveier kan du gjøre ADLS Gen2-data (koblet til et Azure Synapse-arbeidsområde) tilgjengelig i Fabric Lakehouse. Pipeline-overføring innebærer å flytte eksisterende datasamlebånd til Fabric, inkludert aktiviteter for datasamlebånd for notatblokker og Spark-jobbdefinisjon. Mer informasjon om data- og datasamlebåndoverføring.
  • Metadata: Metadataoverføring innebærer flytting av Spark-katalogmetadata (databaser, tabeller og partisjoner) fra en eksisterende Hive MetaStore (HMS) i Azure Synapse til Fabric Lakehouse. Mer informasjon om HMS metadataoverføring.
  • Arbeidsområde: Brukere kan overføre et eksisterende Azure Synapse-arbeidsområde ved å opprette et nytt arbeidsområde i Microsoft Fabric, inkludert metadata. Arbeidsområdeoverføring dekkes ikke i denne veiledningen. Forutsetningen er at brukerne må opprette et nytt arbeidsområde eller ha et eksisterende Fabric-arbeidsområde. Mer informasjon om arbeidsområderoller i Fabric.

Skjermbilde som viser overføringsscenarioene.

Overgang fra Azure Synapse Spark til Fabric Spark krever en dyp forståelse av din nåværende arkitektur og forskjellene mellom Azure Synapse Spark og Fabric. Det første viktige trinnet er en vurdering, etterfulgt av opprettelsen av en detaljert overføringsplan. Denne planen kan tilpasses slik at den samsvarer med systemets unike egenskaper, faseavhengigheter og arbeidsbelastningskompleksiteter.

Relatert innhold