Mikä on Peilaus Fabricissa?
Peilaus Fabricissa on edullinen ja edullinen viiveratkaisu, joka tuo tietoja eri järjestelmistä yhteen analytiikkaympäristöön. Voit jatkuvasti replikoida olemassa olevan tietotilasi suoraan Fabric's OneLakeen useista Azure-tietokannoista ja ulkoisista tietolähteistä.
Kun olet ajantasaisin tieto kyselymuodossa OneLakessa, voit nyt käyttää kaikkia Fabricin eri palveluita, kuten analytiikan suorittamista Sparkin avulla, muistikirjojen suorittamista, tietotekniikkaa ja visualisointia Power BI -raporttien kautta.
Peilauksen avulla käyttäjät voivat hyödyntää erittäin integroitua, päästä päähän ja helppokäyttöistä tuotetta, joka on suunniteltu yksinkertaistamaan analytiikkatarpeitasi. Mirroring on luotu Microsoftin avoimeen käyttöön ja yhteistyöhön teknologiaratkaisuilla, joilla voidaan lukea avoimen lähdekoodin Delta Lake -taulukkomuotoa. Mirroring on edullinen ja pienen viiveen avaimet käteen -ratkaisu, jonka avulla voit luoda OneLakessa kopion tiedoistasi, joita voidaan käyttää kaikkiin analyysitarpeihisi.
Delta-taulukoita voi sitten käyttää kaikkialla Fabricissa, jolloin käyttäjät voivat nopeuttaa matkaansa Fabriciin.
Miksi Mirroring-peilausta käytetään Fabricissa?
Nykyään monilla organisaatioilla on toiminnan kannalta kriittisiä toiminnallisia tai analyyttisia tietoja, jotka istuvat siiloissa.
Näiden tietojen käyttäminen ja käsitteleminen edellyttää tänään monimutkaista ETL-putkea (Pura muunna kuormitus) -putkia, liiketoimintaprosesseja ja päätössiiloja, mikä luo:
- Tärkeiden, jatkuvasti muuttuvien tietojen rajoitettu ja rajoitettu käyttöoikeus
- Ihmisten, prosessien ja teknologian välinen kitka
- Pitkä odotusaika kriittisen tärkeän tiedon tietoputkien ja prosessien luonnissa
- Ei vapautta käyttää työkaluja, joita tarvitset merkityksellisten tietojen analysoimiseen ja jakamiseen mukavasti
- Oikean perustan puute, jotta ihmiset voivat jakaa ja tehdä yhteistyötä tietojen parissa
- Ei yleisiä, avoimia tietomuotoja kaikissa analyyttisissa skenaarioissa – BI, tekoäly, integrointi, tekniikka ja jopa sovellukset
Peilaus Fabricissa tarjoaa helpon käyttökokemuksen, jolla nopeutetaan merkityksellisten tietojen ja päätösten ajankohtaa ja jaetaan tietosiiloja teknologiaratkaisujen välillä:
- Tietojen ja metatietojen lähes reaaliaikainen replikointi SaaS Data-lake -tallennustilaan, jossa on sisäinen analytiikka BI:tä ja tekoälyä varten
Microsoft Fabric -ympäristö perustuu SaaS-palveluun, joka vie yksinkertaisuuden ja integraation aivan uudelle tasolle. Lisätietoja Microsoft Fabricista on artikkelissa Mikä on Microsoft Fabric?
Peilaus luo Fabric-työtilaan kolme kohdetta:
- Mirroring hallitsee tietojen ja metatietojen replikointia OneLakeksi ja muuntamista Parquetiksi analytiikkavalmiissa muodossa. Tämä mahdollistaa jatkojakautumisskenaariot, kuten tietotekniikan, datatieteen ja paljon muuta.
- SQL-analytiikan päätepiste
- Oletussmanttinen malli
SQL-kyselyeditorin lisäksi työkalut voivat sisältää laajan ekosysteemin, kuten SQL Server Management Studion (SSMS), mssql-laajennuksen Visual Studio Codella ja jopa GitHubinCopilot.
Jakaminen helpottaa käyttöoikeuksien valvontaa ja hallintaa ja varmistaa, että voit hallita luottamuksellisten tietojen käyttöä. Jakaminen mahdollistaa myös suojatun ja demokraattisen päätöksenteon koko organisaatiossasi.
Peilauksen tyypit
Fabric tarjoaa kolme eri lähestymistapaa tietojen tuomiseen OneLakeen peilauksen kautta.
- Tietokannan peilaus – Microsoft Fabric -tietokannan peilaus mahdollistaa kokonaisten tietokantojen ja taulukoiden replikoinnin, jonka avulla voit tuoda tietoja eri järjestelmistä yhteen analytiikkaympäristöön.
- Metatietojen peilaus – Fabric-metatietojen peilaus synkronoi metatiedot (kuten luettelon nimet, rakenteet ja taulukot) tietojen fyysisen siirtämisen sijaan. Tämä lähestymistapa hyödyntää pikakuvakkeita ja varmistaa, että tiedot pysyvät lähteessä ja ovat silti helposti käytettävissä Fabricissa.
- Avoin peilaus – Avoin peilaus Fabricissa on suunniteltu laajentamaan peilausta avoimen Delta Lake -taulukkomuodon perusteella. Tämän ominaisuuden avulla kehittäjät voivat kirjoittaa muutostiedot suoraan Microsoft Fabricin peilattuun tietokantakohteeseen avoimen peilauksen ja julkisten ohjelmointirajapintojen perusteella.
Tällä hetkellä käytettävissä ovat seuraavat ulkoiset tietokannat:
| Käyttöympäristö | Lähes reaaliaikainen replikointi | Peilauksen tyyppi | Päästä päähän -opetusohjelma |
|---|---|---|---|
| Microsoft Fabric peilattu tietokannat Azure Cosmos DB:stä (esikatselu) | Kyllä | Tietokantapeilaus | Opetusohjelma: Azure Cosmos DB |
| Microsoft Fabric peilattu tietokantoja Azure Databricksistä (esikatselu) | Kyllä | Metatietojen peilaus | Opetusohjelma: Azure Databricks |
| Microsoft Fabric peilattu tietokannat Azure SQL -tietokannasta | Kyllä | Tietokantapeilaus | Opetusohjelma: Azure SQL -tietokanta |
| Microsoft Fabric peilattu tietokannat Azure SQL:n hallitusta esiintymästä (esikatselu) | Kyllä | Tietokantapeilaus | Opetusohjelma: Azure SQL:n hallittu esiintymä |
| Microsoft Fabric peilattu tietokantoja Snowflakesta | Kyllä | Tietokantapeilaus | Opetusohjelma: Snowflake |
| Peilattujen tietokantojen avaaminen (esiversio) | Kyllä | Avaa peilaus | Opetusohjelma: Avaa peilaus |
| Microsoft Fabric peilattu tietokannat Fabric SQL -tietokannasta (esikatselu) | Kyllä | Tietokantapeilaus | Automaattisesti määritetty |
Miten tietokannan peilauksen lähes reaaliaikainen replikointi toimii?
Peilaus otetaan käyttöön luomalla suojattu yhteys operatiiviseen tietolähteeseen. Valitset, replikoidaanko koko tietokanta vai yksittäiset taulukot, ja Mirroring pitää tietosi automaattisesti synkronoituna. Kun tiedot on määritetty, ne replikoidaan jatkuvasti OneLakeen analysoinnin kulutusta varten.
Seuraavat ovat Peilauksen keskeisiä keskeistä keskeistä ytimiä:
Peilauksen käyttöönotto Fabricissa on yksinkertaista ja intuitiivista ilman monimutkaisia ETL-putkia, että sinun tarvitsee varata muita käsittelyresursseja ja hallita tietojen siirtoa.
Peilaus Fabricissa on täysin hallittu palvelu, joten sinun ei tarvitse huolehtia peilatun yhteyden replikoinnin isännöinnistä, ylläpidosta tai hallinnasta.
Miten metatietojen peilaus toimii?
Peilaus mahdollistaa tietojen replikoinnin lisäksi myös pikakuvakkeiden tai metatietojen peilauksen täydellisen tietojen replikoinnin sijaan, jolloin tiedot ovat käytettävissä ilman niiden fyysistä siirtämistä tai monistamista. Tämän kontekstin peilaaminen viittaa vain metatietojen , kuten luetteloiden nimien, rakenteet ja taulukoiden, replikoimiseen varsinaisten tietojen sijasta. Tämän lähestymistavan avulla Fabric voi käyttää eri lähteistä peräisin olevia tietoja monistamatta niitä, mikä yksinkertaistaa tiedonhallintaa ja minimoi tallennustarpeita.
Esimerkiksi käyttäessäsi Unity Catalogen rekisteröityjä tietoja Fabric peilaa vain Azure Databricksin luettelorakennetta, minkä ansiosta pohjana olevia tietoja voidaan käyttää pikakuvakkeiden kautta. Tämä menetelmä varmistaa, että kaikki lähdetietojen muutokset näkyvät heti Fabricissa ilman tietojen siirtämistä, reaaliaikaisen synkronoinnin säilyttämistä ja ajan tasalla olevien tietojen käytön tehostamista.
Miten peilauksen avaaminen toimii?
Sen lisäksi, että voit peilata tietojen replikoinnin luomalla suojatun yhteyden tietolähteeseen, voit myös valita aiemmin luodun tietopalvelun tai kirjoittaa oman sovelluksesi tietojen päätymiseksi peilattuun tietokantaan. Kun olet luonut avoimen peilatun tietokannan julkisen ohjelmointirajapinnan kautta tai Fabric-portaalin kautta, saat OneLakesta laskeutumisalueen URL-osoitteen, johon voit muuttaa tietoja avoimen peilausmäärityksen mukaisesti.
Kun tiedot ovat oikean muotoisia, replikointi alkaa suorittaa ja hallita muutosten yhdistämisen monimutkaisuutta päivityksiin, lisäämiseen ja poistamiseen, jotta ne voidaan ottaa huomioon delta-taulukoissa. Tämä menetelmä varmistaa, että kaikki laskeutumisalueelle kirjoitetut tiedot pysyvät välittömästi ja Fabricissa olevat tiedot ajan tasalla.
Jakaminen
Jakaminen helpottaa käyttöoikeuksien hallintaa ja samalla suojausta, kuten rivitason suojausta (RLS) ja objektitason suojausta (OLS), ja varmistamaan, että hallitset luottamuksellisten tietojen käyttöoikeuksia. Jakaminen mahdollistaa myös suojatun ja demokraattisen päätöksenteon koko organisaatiossasi.
Jakamalla käyttäjät myöntävät muille käyttäjille tai ryhmälle käyttäjäryhmän käyttöoikeuden peilattuun tietokantaan antamatta käyttöoikeutta työtilaan ja muihin sen kohteisiin. Kun joku jakaa peilatun tietokannan, hän myöntää myös käyttöoikeuden SQL-analytiikan päätepisteeseen ja siihen liittyvään semanttiseen oletusmalliin.
Lisätietoja on kohdassa Peilatun tietokannan jakaminen ja käyttöoikeuksien hallinta.
Tietokantakyselyt
OneLakeen tallennetun peilatun tietokantasi tietojen avulla voit kirjoittaa tietokantakyselyitä, yhdistää tietoja peilatuista tietokannoista, varastoista ja Lakehousesin SQL-analytiikan päätepisteistä yhteen T-SQL-kyselyyn. Lisätietoja on artikkelissa Tietokantojen välisen kyselyn kirjoittaminen.
Voit esimerkiksi viitata taulukkoon peilatuista tietokannoista ja varastoista käyttämällä kolmiosaista nimeämistä. Käytä seuraavassa esimerkissä kolmiosaista nimeä viittaamaan ContosoSalesTable varastossa ContosoWarehouse. Muista tietokannoista tai varastoista kolmiosaisen SQL-vakion nimeämiskäytännön ensimmäinen osa on peilatun tietokannan nimi.
SELECT *
FROM ContosoWarehouse.dbo.ContosoSalesTable AS Contoso
INNER JOIN Affiliation
ON Affiliation.AffiliationId = Contoso.RecordTypeID;
Tietotekniikka peilattujen tietokantatietojen kanssa
Microsoft Fabric tarjoaa erilaisia tietotekniikkaominaisuuksia, joiden avulla se varmistaa, että tiedot ovat helposti käytettävissä, hyvin organisoituja ja laadukkaita. Fabric Data Engineeringistä voit tehdä seuraavaa:
- Luo ja hallitse tietojasi Sparkinä lakehousen avulla
- Suunnittele putkia tietojen kopioimiseksi Lakehouse-tallennustilaan
- Erä-/virtautustyön lähettäminen Spark-klusteriin Spark-työmääritysten avulla
- Käytä muistikirjoja koodin kirjoittamiseen tietojen käsittelystä, valmistelusta ja muuntamisesta
Datatiede ja peilatut tietokantatiedot
Microsoft Fabric tarjoaa Fabric Data Science -tieteen ja tarjoaa käyttäjille mahdollisuuden suorittaa datatieteen päästä päähän -työnkulkuja tietojen rikastamiseksi ja merkityksellisten liiketoimintatietojen mahdollistamiseksi. Voit suorittaa laajan valikoiman toimintoja koko datatiedeprosessista aina tietojen tutkimisesta, valmistelusta ja puhdistuksesta kokeiluihin, mallinnukseen, mallien pisteytykseen ja bi-raporttien ennakoivien merkityksellisten tietojen palvelemiseen.
Microsoft Fabric -käyttäjät voivat käyttää datatieteen kuormituksia. Sieltä he voivat löytää ja käyttää erilaisia olennaisia resursseja. He voivat esimerkiksi luoda koneoppimiskokeiluja, malleja ja muistikirjoja. Ne voivat myös tuoda olemassa olevia muistikirjoja datatieteen aloitussivulle.
SQL-tietokanta Fabricissa
Voit myös suoraan luoda ja hallita SQL-tietokantaa Microsoft Fabricissa (esikatselu) Fabric-portaalin sisällä. Azure SQL -tietokantaan perustuva Fabric-tietokannan SQL-tietokanta peilataan automaattisesti analytiikkatarkoituksia varten, ja sen avulla voit helposti luoda toiminnallisen tietokannan Fabricissa. SQL-tietokanta on Fabric for OLTP -kuormitusten koti, ja se voidaan integroida Fabricin lähdeohjausintegraatioon.