Delen via

Migreren van Azure Synapse Spark naar Fabric

  • Artikel

Voordat u met de migratie begint, moet u controleren of Fabric Data-engineer ing de beste oplossing is voor uw workload. Fabric Data-engineer ing biedt ondersteuning voor lakehouse, notebook, omgeving, Spark-taakdefinitie (SJD) en gegevenspijplijnitems, waaronder ondersteuning voor verschillende runtime- en Spark-mogelijkheden.

Belangrijkste overwegingen

De eerste stap bij het opstellen van een migratiestrategie is het beoordelen van geschiktheid. Het is de moeite waard om te vermelden dat bepaalde Fabric-functies met betrekking tot Spark momenteel in ontwikkeling of planning zijn. Ga naar de roadmap voor Fabric voor meer informatie en updates.

Zie voor Spark een gedetailleerde vergelijkingsverschillen tussen Azure Synapse Spark en Fabric.

Migratiescenario's

Als u vaststelt dat Fabric Data-engineer ing de juiste keuze is voor het migreren van uw bestaande Spark-workloads, kan het migratieproces meerdere scenario's en fasen omvatten:

  • Items: Itemsmigratie omvat de overdracht van een of verschillende items van uw bestaande Azure Synapse-werkruimte naar Fabric. Meer informatie over het migreren van Spark-pools, Spark-configuraties, Spark-bibliotheken, notebooks en Spark-taakdefinitie.
  • Gegevens en pijplijnen: Met OneLake-snelkoppelingen kunt u ADLS Gen2-gegevens (gekoppeld aan een Azure Synapse-werkruimte) beschikbaar maken in Fabric Lakehouse. Pijplijnmigratie omvat het verplaatsen van bestaande gegevenspijplijnen naar Fabric, inclusief notebook- en Spark-taakdefinitieactiviteiten. Meer informatie over de migratie van gegevens en pijplijnen.
  • Metagegevens: Migratie van metagegevens van Spark-catalogus omvat het verplaatsen van metagegevens (databases, tabellen en partities) van een bestaande Hive MetaStore (HMS) in Azure Synapse naar Fabric Lakehouse. Meer informatie over de migratie van HMS-metagegevens.
  • Werkruimte: Gebruikers kunnen een bestaande Azure Synapse-werkruimte migreren door een nieuwe werkruimte te maken in Microsoft Fabric, inclusief metagegevens. De migratie van werkruimten wordt niet behandeld in deze richtlijnen. Veronderstelling is dat gebruikers een nieuwe werkruimte moeten maken of een bestaande Fabric-werkruimte moeten hebben. Meer informatie over werkruimterollen in Fabric.

Schermopname van de migratiescenario's.

Voor het overstappen van Azure Synapse Spark naar Fabric Spark is een goed begrip van uw huidige architectuur en de verschillen tussen Azure Synapse Spark en Fabric vereist. De eerste cruciale stap is een evaluatie, gevolgd door het maken van een gedetailleerd migratieplan. Dit plan kan worden aangepast aan de unieke kenmerken, faseafhankelijkheden en complexiteit van uw systeem.

Gerelateerde inhoud