Del via


Overføre fra Azure Data Factory til Data Factory i Microsoft Fabric

Denne artikkelen er rettet mot Azure Data Factory og Synapse Gen2 pipeline creators. Den gir deg veiledning og begrunnelse for å modernisere og overføre rørledninger til Data Factory for Microsoft Fabric.

Bakgrunn

Microsoft Fabric er en integrert plattform for både selvbetjente og IT-administrerte virksomhetsdata. Med eksponentiell vekst i datavolumer og kompleksitet krever Fabric-kunder bedriftsløsninger som skalerer, er sikre, enkle å administrere og tilgjengelige for alle brukere på tvers av de største organisasjonene.

De siste årene har Microsoft investert betydelig arbeid for å levere skalerbare skyfunksjoner til kunder. For dette formål gir Data Factory in Fabric et stort økosystem av dataintegreringsutviklere og dataintegreringsløsninger bygget opp over flere tiår for å bruke hele settet med funksjoner og funksjoner som går langt utover sammenlignbar funksjonalitet som er tilgjengelig i tidligere generasjoner.

Kunder spør naturligvis om det er en mulighet til å konsolidere ved å være vert for dataintegreringsløsningene sine i Fabric. De stiller ofte spørsmål som:

  • Fungerer all funksjonaliteten vi er avhengig av, i Fabric-rørledninger?
  • Hvilke funksjoner er bare tilgjengelige i Fabric Pipelines?
  • Hvordan overfører vi eksisterende rørledninger til Fabric-rørledninger?
  • Hva er Microsofts veikart for foretaksdatainntak?

Svar på mange av disse spørsmålene er beskrevet i denne artikkelen.

Notat

Beslutningen om å overføre til stoffkapasiteten avhenger av kravene til hver kunde. Kunder bør nøye vurdere andre fordeler for å ta en informert beslutning. Vi forventer å se organisk overføring til Fabric rørledninger over tid, og vår intensjon er at det skjer på vilkår som hver kunde er komfortabel med.

For å være klar, er det for øyeblikket ingen planer om å avskrive Azure Data Factory eller Synapse Gen2 for datainntak. Det er en prioritet å fokusere investeringen på Fabric-rørledninger for foretaksdatainntak, og derfor vil den ekstra verdien fra Fabric-kapasitetene øke over tid. Kunder som velger stoffkapasitet kan forvente å dra nytte av justering med microsoft Fabric-produktveikartet.

Konvergens av virksomhets- og selvbetjent dataintegrering

Konsolideringen av elementer i Fabric forenkler oppdagelse, samarbeid og administrasjon ved å kolocating ressurser. Dette gjør det mulig for sentrale IT-team å operasjonalisere driftskritiske databevegelser og transformasjonstjenester i samsvar med bedriftens standarder, inkludert dataavstamming og overvåking, samtidig som de enkelt integrerer populære selvbetjente elementer.

For å støtte organisasjonenes samarbeidende og skalerbare behov introduserer Fabric-datasamlebånd Office 365- og Teams-aktiviteter for å sende meldinger, sømløse oppdateringer av semantiske modeller for Power BI og robuste styringsfunksjoner, slik at organisasjoner kan administrere dataavstamming og overvåking av datasamlebånd. Integreringen av generativ kunstig intelligens via Copilot forbedrer rørledningsopplevelsen ytterligere ved å tilby intelligente forklaringer på rørledningsgenerering og feiloppløsning, noe som forenkler oppretting og administrasjon av komplekse løsninger.

Ved å bruke en felles plattform er arbeidsflyten strømlinjeformet, noe som forbedrer løsningsutviklingen mellom bedrifter og IT. Dette gjør det mulig for organisasjoner å skalere dataløsningene sine til bedriftsnivåer, noe som sikrer høy ytelse, fleksibilitet og effektivitet i administrasjon av store mengder data.

Stoffkapasitet

På grunn av den distribuerte arkitekturen er stoffkapasiteten mindre følsom for generell belastning, temporale pigger og høy samtidighet. Ved å konsolidere kapasiteter til større fabric kapasitet SKU-er, kan kundene oppnå økt ytelse og gjennomstrømming.

Funksjonssammenligning

Tabellen nedenfor viser funksjoner som støttes i Azure Data Factory og Fabric Data Factory.

Trekk Azure Data Factory Fabric Data Factory
datasamlebåndaktiviteter
Office 365- og Teams aktiviteter gjør det mulig for deg å sende meldinger sømløst, noe som gir en effektiv kommunikasjon og samarbeid på tvers av organisasjonen Nei Ja
Opprett tilkoblinger til den semantiske Power BI-modellen og Dataflyt gen2 for å sikre at dataene dine oppdateres konsekvent og up-to-dato Nei Ja
Validering i et datasamlebånd for å sikre at datasamlebåndet bare fortsetter kjøringen når den validerer den vedlagte datasettreferansen, at den oppfyller de angitte kriteriene eller tidsavbrutt Ja Ja1
Utfør en SQL Server Integration Services (SSIS) pakke for å utføre dataintegrerings- og transformasjonsoperasjoner Ja Planlagt
datatransformasjon
Visuelt utformede datatransformasjoner ved hjelp av Apache Spark-klynger med Tilordne dataflyter for å opprette og behandle datatransformasjonsprosesser gjennom et grafisk grensesnitt Ja Ingen2
Visuelt utformede datatransformasjoner ved hjelp av stoffdatabehandlingsmotoren med det intuitive grafiske grensesnittet i Power Query i Dataflyt Gen2 Nei Ja
tilkobling
Støtte for alle datakilder for Data Factory Ja Pågår3
skalerbarhet
Sikre sømløs kjøring av aktiviteter i et datasamlebånd med planlagte kjøringer Ja Ja
Planlegge flere kjøringer for ett enkelt datasamlebånd for fleksibel og effektiv administrasjon av datasamlebånd Ja planlagt
Bruk av tumbling-vindusutløsere for å planlegge datasamlebåndkjøringer i distinkte, ikke-overlappende tidsvinduer Ja planlagt
Hendelsesutløsere for å automatisere kjøring av datasamlebåndkjøringer som svar på bestemte eller relevante hendelsesforekomster Ja Ja4
kunstig intelligens
Copilot for Data Factory, som gir intelligent datasamlebåndgenerering for å innta data med letthet og forklaringer for å bedre forstå komplekse datasamlebånd eller gi forslag til feilmeldinger Nei Ja
innholdsbehandling
dataavstammingsvisning, som hjelper brukerne med å forstå og vurdere datasamlebåndavhengigheter Nei Ja
datasamlebånd for distribusjon, som administrerer livssyklusen til innhold Nei Ja
plattform skalerbarhet og robusthet
Premium-kapasitet arkitektur, som støtter økt skala og ytelse Nei Ja
multi-geo- støtte, som hjelper multinasjonale kunder med å håndtere regionale, bransjespesifikke eller organisatoriske krav til datalagring Ja Ja
Security
virtuell nettverksdatagateway (virtuelt nettverk) tilkobling, noe som gjør at Fabric kan fungere sømløst i organisasjonens virtuelle nettverk Nei planlagt
lokal datagateway tilkobling, noe som gir sikker tilgang til data mellom en organisasjons lokale datakilder og Fabric-elementer Nei Ja
Azure -tjenestekoder støtte, som er en definert gruppe IP-adresser som automatisk administreres for å minimere kompleksiteten til oppdateringer eller endringer i nettverkssikkerhetsregler Ja Ja
governance
Innhold godkjenning, for å promotere eller sertifisere verdifulle stoffelementer av høy kvalitet Nei Ja
Microsoft Purview-integrering, som hjelper kunder med å administrere og styre Fabric-elementer Ja Ja
Microsoft Information Protection (MIP) følsomhetsetiketter og integrering med Microsoft Defender for Cloud Apps for hindring av tap av data Nei Ja
overvåking og diagnoselogging
Logging av hendelser for kjøring av datasamlebånd i et hendelseslager for å overvåke, analysere og feilsøke datasamlebåndytelse Ja Planlagt
Monitoring hub, som gir overvåkingsfunksjoner for Fabric-elementer Nei Ja
Microsoft Fabric Capacity Metrics-appen, som gir overvåkingsfunksjoner for stoffkapasiteter Nei Ja
Overvåkingslogg, som sporer brukeraktiviteter på tvers av Fabric og Microsoft 365 Nei Ja

1 Bruk Hent metadata, Til og Hvis betingelse aktiviteter for henting av tilsvarende metadata for valideringsaktiviteten.

2 Bruk funksjonen Aktiver ekstern datasamlebånd til å utføre aktivitetene for tilordning av dataflyt, kan du se Aktivere datasamlebåndaktivitet.

3 Hvis du vil vise koblingene som for øyeblikket støttes for datasamlebånd, kan du se støtte for datasamlebånd.

4 Bruk Fabric-hendelsesstrømmer og refleks for å utløse kjøringshendelser, kan du se Pipeline-hendelsesutløsere.

Hensyn

Det er noen andre hensyn å ta hensyn til planleggingen før du overfører til Fabric-rørledninger.

Lisensiering

Stoffsamlebånd krever minst en Microsoft Fabric -lisens (gratis) for å redigere i et premium kapasitetsområde, for å finne ut mer om Fabric-lisenser.

Veikart

Utgivelsesplandokumentasjonen for Microsoft Fabric leser opp de nyeste oppdateringene og tidslinjene til kundene etter hvert som funksjonene er klargjort for fremtidige utgivelser, inkludert hva som er nytt og planlagt for Data Factory i Microsoft Fabric.

Hvis du vil ha mer informasjon, kan du se microsoft Fabric-utgivelsesplandokumentasjon.

Lær hvordan du planlegger overføringen av ADF til Fabric Data Factory.