Mikä on Microsoft Fabricin Data Factoryn kopiointityö (esikatselu)
Data Factory in Fabricin avulla käyttäjät voivat integroida saumattomasti tietoja yli 100 sisäänrakennetusta liittimestä ( sekä lähteistä että kohteista - visuaalisesti intuitiivisen käyttöliittymän kautta. Tietoputkissa toimiva kopiointitoiminto helpottaa tietojen käsittelytoimintoa. Samaan aikaan Dataflow Gen2 tukee tietojen muunnoksia ja putkia integroinnin työnkulun järjestämiseksi.
Kopiointityön edut
Vaikka tietoputkien Kopioi-toiminta käsittelee tietojen käsittelyä joukko-/erätoiminnoilla, tietoputkien luominen Data Factoryssa on edelleen haastavaa monille kentän uusille käyttäjille, joiden oppimiskäyrä on jyrkempi. Hienoa, että esittelemme kopiointityön ja nostamme tietojen käsittelykokemuksen entistä virtaviivaistettuun ja käyttäjäystävällisempään prosessiin mistä tahansa lähteestä mihin tahansa kohteeseen. Nyt tietojen kopioiminen on helpompaa kuin koskaan ennen. Lisäksi kopiointityö tukee erilaisia tietojen toimitustyylejä, kuten sekä erän kopiointia että lisäävää kopiota, ja se tarjoaa joustavuutta omien tarpeidesi mukaan.
Kopioi työn etuja muihin tietojen siirtomenetelmiin verrattuna ovat muun muassa seuraavat:
- Intuitiivinen käyttökokemus: Koe saumaton tietojen kopiointi ilman kompromisseja, mikä tekee siitä helpompaa kuin koskaan.
- Tehokkuus: Ota lisäävä kopiointi käyttöön vaivattomasti vähentämällä manuaalisia toimia. Tämä tehokkuus vähentää resurssien käyttöä ja nopeuttaa kopioinnin kestoa.
- Joustavuus: Vaikka nautitkin yksinkertaisuudesta, voit myös hallita tietojen siirtoa joustavasti. Valitse, mitä taulukoita ja sarakkeita haluat kopioida, yhdistää tiedot, määrittää luku- ja kirjoitustoiminnot ja määrittää tarpeisiisi sopivia aikatauluja riippumatta siitä, onko kyseessä kertatehtävä vai toistuva toiminto.
- Vankka suorituskyky: Palvelimeton määritys, joka mahdollistaa suuren mittakaavan rinnakkaisuuden tiedonsiirron ja maksimoi tietojen siirron siirtomäärän järjestelmässäsi.
Tuetut liittimet
Tällä hetkellä voit käyttää kopiointityötä pilvipalvelun tiedonsiirtoon tai tietojen kopioimiseen paikallisesta tietosäilöstä yhdyskäytävän kautta. Kopiointityö tukee seuraavia tietosäilöjä sekä lähteenä että kohdesijaintina:
- Azure SQL DB
- Paikallinen SQL Server
- Fabric Warehouse
- Fabric Lakehouse
- Amazon S3
- Azure Data Lake Storage Gen2
- Azure Blob -säilö
- Amazon RDS for SQL Server
Tuotetiimi tutkii liittimien lisätukea, joten pysy kuulolla päivitysten takia.
Kopiointitoiminta
Voit valita seuraavista tietojen toimitustyyleistä.
- Täysi kopiointitila: Kunkin kopiointityön suorittaminen kopioi kaikki tiedot lähteestä kohdesijainniin kerralla.
- Lisäävä kopiointitila: Ensimmäinen työn suoritus kopioi kaikki tiedot, ja myöhempi työ suorittaa vain kopioi muutokset edellisestä suorittamisesta lähtien. Muutetut tiedot lisätään kohdesäilöön.
Voit myös valita, miten tiedot kirjoitetaan kohdesäilöön.
Kopioi työ liittää tiedot oletusarvoisesti kohdesijainti , jotta muutoshistoria ei jää huomaamatta. Voit kuitenkin myös säätää kirjoitustoimintoa päivityslisäystä tai korvaamista.
- Kun kopioit tietoja tallennussäilöön, uudet rivit taulukoista tai tiedostoista kopioidaan kohdesijainnin uusiin tiedostoihin. Jos samaa nimeä käyttävä tiedosto on jo kohdesäilössä, se korvataan.
- Kun kopioit tietoja tietokantaan, uudet rivit taulukoista tai tiedostoista liitetään kohdetaulukoihin. Voit muuttaa kirjoituskäyttäytymisen päivityslisäykseksi (SQL DB- tai SQL Server -palvelimessa) tai korvaamiseksi (Fabric Lakehouse -taulukoissa).
Lisäävä sarake
Lisäävässä kopiointitilassa sinun on valittava lisäävä sarake kullekin taulukolle muutosten tunnistamiseksi. Copy Job käyttää tätä saraketta vesileimana vertaamalla sen arvoa samaan edellisestä suorituksesta vain uusien tai päivitettyjen tietojen kopioimiseksi. Lisäävän sarakkeen on oltava aikaleima tai kasvava int-int.
Alueellinen käytettävyys
Kopiointityön alueellinen käytettävyys on sama kuin putken.
Hinnoittelu
Kopiointityö käyttää samaa laskutusmittaria: Tietojen siirtoa, jossa on identtinen kulutusaste.