Nyheter för Azure Data Factory
Azure Data Factory förbättras kontinuerligt. Om du vill hålla dig uppdaterad om den senaste utvecklingen kan du läsa den aktuella sidan Nyheter , som innehåller information om:
- De senaste versionerna.
- Kända problem.
- Buggkorrigeringar.
- Inaktuella funktioner.
- Planer för ändringar.
Den här arkivsidan behåller uppdateringar från äldre månader.
Kolla in vårt senaste videoarkiv för alla våra månatliga uppdateringar.
September 2023
Pipelines
Stöd har lagts till för metadatadrivna pipelines för dynamisk fullständig och inkrementell bearbetning i Azure SQL Läs mer
Augusti 2023
Sammanställning av ändringsdata
- Azure Synapse Analytics-måltillgänglighet i CDC-resurs på toppnivå Läs mer
- Snowflake-anslutningsprogram i stöd för mappning Dataflöde för ändringsdatainsamling i offentlig förhandsversion Läs mer
Dataflöde
- Heltalstyp tillgänglig för pipelinevariabler Läs mer
- Snowflake CDC source connector available in top-level CDC resource Läs mer
- Stöd för internt användargränssnitt för parameterisering för fler länkade tjänster Läs mer
Dataflytt
- Stöd för hanterade privata slutpunkter för Application Gateway och MySQL – flexibel server Läs mer
- Allmän tillgänglighet för hanterat virtuellt nätverk ( time-to-live) (TTL) Läs mer
Integration runtime
Lokalt installerad integrationskörning stöder nu fristående interaktiv redigering (förhandsversion) Läs mer
juli 2023
Sammanställning av ändringsdata
CDC-resursen på den översta nivån stöder nu schemautveckling. Läs mer
Dataflöde
Alternativet Sammanfoga schema i deltamottagaren stöder nu schemautveckling i Mappning Dataflöde. Läs mer
Dataflytt
- Kommentera ut en del av pipelinen med inaktivering. Läs mer
- Returvärdet för pipelinen är nu allmänt tillgängligt. Läs mer
Utvecklarnas produktivitet
Dokumentationssökning ingår nu i sökverktygsfältet för Azure Data Factory. Läs mer
Juni 2023
Kontinuerlig integrering och distribution
npm-paketet stöder nu förladdat paket för att skapa ARM-mallar. Om brandväggsinställningen blockerar direkt nedladdning för npm-paketet kan du nu läsa in paketet i förväg och låta npm-paketet använda lokal version i stället. Det här är en superökning för DIN CI/CD-pipeline i en brandväggsmiljö.
Regionexpansion
Azure Data Factory är nu tillgängligt i Sverige, centrala. Du kan samplaceera ditt ETL-arbetsflöde i den här nya regionen om du använder regionen för att lagra och hantera ditt moderna informationslager. Läs mer
Dataflytt
Det finns nu stöd för att skydda utgående trafik med Azure Data Factorys regler för utgående nätverk. Läs mer
Anslutningar
Amazon S3-anslutningsappen stöds nu som målmottagare med hjälp av mappning Dataflöde. Läs mer
Dataflöde
Vi introducerar valfria källinställningar för AvgränsadeText- och JSON-källor i CDC-resurs på toppnivå. CDC-resursen på den översta nivån i datafabriken har nu stöd för valfria källkonfigurationer för avgränsade och JSON-källor. Nu kan du välja kolumn-/radavgränsare för avgränsade källor och ange dokumenttypen för JSON-källor. Läs mer
maj 2023
Data Factory i Microsoft Fabric
Datafabriken i Microsoft Fabric tillhandahåller dataförflyttning och datatransformeringstjänster i molnskala som gör att du kan lösa de mest komplexa datafabriks- och ETL-scenarierna. Den är avsedd att göra din datafabriksupplevelse enkel att använda, kraftfull och verkligen i företagsklass.
April 2023
Dataflöde
Avregistrera enkelt flera matriser i ADF-dataflöden. ADF har uppdaterat Transformering av platta som nu gör det superlätt att avregistrera flera matriser från ett enda transformeringssteg för Platta ut . Läs mer
Kontinuerlig integrering och distribution
Du kan anpassa incheckningsmeddelandet i Git-läge nu. Skriv in en detaljerad beskrivning av de ändringar du gör, så sparar vi dem på Git-lagringsplatsen.
Anslutningar
Azure Blob Storage-anslutningsappen stöder nu anonym autentisering. Läs mer
Mars 2023
Anslutningar
Azure Data Lake Storage Gen2-anslutningsprogrammet stöder nu signaturautentisering för delad åtkomst. Läs mer
2023 februari
Dataflytt
- Anonym autentiseringstyp som stöds för Azure Blob Storage Läs mer
- Uppdaterad SAP-mall för att enkelt flytta SAP-data till ADLSGen2 i Delta-format Läs mer
Orkestrering
- Ange pipelineutdatavärde (offentlig förhandsversion) Läs mer
- Arbetsflödesorkestreringshanteraren (offentlig förhandsversion) Läs mer
Utvecklarnas produktivitet
Stöd för mörkt tema har lagts till (offentlig förhandsversion) Läs mer
Januari 2023
Dataflöde
- Flowlets stöder nu schemaavvikelse Läs mer
- Inkrementellt SQL CDC-extrahering stöder nu numeriska kolumner Läs mer
Dataflytt
Ny CDC-resurs på toppnivå – inbyggd CDC-konfiguration i tre enkla steg Läs mer
Orkestrering
Orkestrera Synapse-notebook-filer och Synapse Spark-jobbdefinitioner internt Läs mer
Regionexpansion
- Fortsatt regionexpansion – China North 3 har nu stöd för Learn more
- Fortsatt regionexpansion – Schweiz, västra har nu stöd för Learn more
SQL Server Integration Services (SSIS)
Express virtual network injection for SSIS now generally available Learn more
Utvecklarnas produktivitet
- Stöd har lagts till för att favoritisera resurser på startsidan
- Spara kolumnbredd för pipelineövervakning
- Övervaka filteruppdateringar för snabbare sökningar
- Starta galleriet för pipelinemall direkt via Azure Portal
December 2022
Dataflöde
Inkrementellt extrakt för SQL Change Data Capture (CDC) – stöder numeriska kolumner i mappning av dataflöde Läs mer
Dataflytt
Express virtuell nätverksinmatning för SSIS i Azure Data Factory är allmänt tillgänglig Läs mer
Regionexpansion
Fortsatt regionexpansion – Azure Data Factory är nu tillgängligt i Kina, norra 3 Läs mer
November 2022
Dataflöde
- Endast inkrementell är tillgängligt i SAP CDC – hämta endast ändringar från SAP-systemet utan inledande fullständig belastning Läs mer
- Källpartitioner i den första fullständiga databelastningen för SAP CDC för att förbättra prestanda Läs mer
- En ny pipelinemall – Läs in flera objekt med stora mängder från SAP via SAP CDC Läs mer
Dataflytt
- Stöd till Azure Databricks via privat länk från ett hanterat virtuellt Data Factory-nätverk Läs mer
Användargränssnitt
2 Förbättringar av pipelinedesignern som lagts till i förhandsversionen av ADF Studio
- Utfällt dynamiskt innehåll – gör det enklare att ange dynamiskt innehåll i pipelineaktiviteter utan att använda uttrycksverktyget Läs mer
- Felmeddelandeflytt till statuskolumn – gör det enklare för dig att visa fel när du ser en misslyckad pipelinekörning Läs mer
Kontinuerlig integrering och distribution
I konfigurationen för automatisk publicering inaktiverar du publiceringsknappen för att annullera överskrivning av den senaste automatiserade publiceringsdistributionen Läs mer
Oktober 2022
Videosammanfattning
Dataflöde
- Exportera upp till 1 000 rader från förhandsversionen av dataflödet Läs mer
- SQL CDC i Mappning Dataflöde nu tillgänglig (offentlig förhandsversion) Läs mer
- Lås upp avancerad analys med Microsoft 365-mappning Dataflöde Connector Läs mer
- SAP Change Data Capture (CDC) i nu allmänt tillgänglig Läs mer
Utvecklarnas produktivitet
- Ta nu emot bidrag från communityn till mallgalleriet Läs mer
- Ny design i Azure Portal – upptäck enkelt hur du startar ADF Studio Läs mer
- Learning Center är nu tillgängligt i Azure Data Factory Studio Läs mer
- Ett klick för att prova Azure Data Factory Läs mer
Orkestrering
- Detaljerad faktureringsvy tillgänglig för ADF – se detaljerad faktureringsinformation per pipeline (offentlig förhandsversion) Läs mer
- Tidsgränsen för körning av skriptaktivitet kan nu konfigureras Läs mer
Regionexpansion
Fortsatt regionexpansion – Qatar Central har nu stöd för Learn more
Kontinuerlig integrering och distribution
Exkludera pipelineutlösare som inte ändrades i distributionen nu allmänt tillgängliga Läs mer
September 2022
Videosammanfattning
Dataflöde
- Amazon S3-källanslutningsappen har lagts till Läs mer
- Google Sheets REST-baserad anslutningsapp har lagts till som källa (förhandsversion) Läs mer
- Maximal kolumnoptimering i dataflöde Läs mer
- Sap Change Data Capture-funktioner i Mappning Dataflöde (förhandsversion) – Extrahera och transformera dataändringar från SAP-system för en effektivare datauppdatering Läs mer
- Skriva data till ett uppslagsfält via alternativa nycklar som stöds i Dynamics 365/CRM-anslutningsappar för att mappa dataflöden Läs mer
Dataflytt
Stöd för att konvertera Oracle NUMBER-typ till motsvarande heltal i källan Läs mer
Övervakning
- Ytterligare övervakningsförbättringar i Azure Data Factory Läs mer
- Övervaka inläsningsförbättringar – pipelinen kör grupperingsdata som hämtas endast när de expanderas
- Sidnumrering har lagts till i vyn för pipelineaktivitetskörningar för att visa alla aktivitetsposter i pipelinekörning
- Övervakningsförbrukningsförbättring – inläsningsikonen läggs till för att veta när förbrukningsrapporten är helt beräknad
- Ytterligare sorteringskolumner i övervakning – sortering läggs till för Pipelinenamn, Kör slut och Status
- Tidszonsinställningar sparas nu i övervakningen
- Gantt-schemavyn stöds nu i IR-övervakning Läs mer
Orkestrering
DELETE-metoden i webbaktiviteten har nu stöd för att skicka en brödtext med HTTP-begäran Läs mer
Användargränssnitt
- Internt gränssnittsstöd för parameterisering har lagts till för ytterligare 6 länkade tjänster – SAP ODP, ODBC, Microsoft Access, Informix, Snowflake och DB2 Läs mer
- Förbättringar av pipelinedesignern som lagts till i förhandsversionen av Studio – användarna kan visa arbetsflöden i pipelineobjekt som For Each, If Then osv. Lära sig mer
Augusti 2022
Videosammanfattning
Dataflöde
- Appfigures-anslutningsprogrammet har lagts till som källa (förhandsversion) Läs mer
- Cast-transformering har lagts till – konvertera datatyper visuellt Läs mer
- Nytt användargränssnitt för infogade datauppsättningar – kategorier som har lagts till för att enkelt hitta datakällor Läs mer
Dataflytt
Autentiseringstyp för tjänstens huvudnamn har lagts till för Azure Blob Storage Läs mer
Utvecklarnas produktivitet
- Tidsgränsen för standardaktiviteten har ändrats från 7 dagar till 12 timmar Läs mer
- Ny upplevelse för att skapa datafabrik – ett klick för att göra din fabrik redo inom några sekunder Läs mer
- Uppdatering av användargränssnittet för Expression Builder – kategoriska flikar som lagts till för enklare användning Läs mer
Kontinuerlig integrering och kontinuerlig leverans (CI/CD)
När CI/CD integrerar ARM-mall, i stället för att stänga av alla utlösare, kan den exkludera utlösare som inte har ändrats i distributionen Läs mer
juli 2022
Videosammanfattning
Dataflöde
- Asana-anslutningsprogram har lagts till som källa Läs mer
- Tre nya datatransformeringsfunktioner stöds nu i Läs mer
- collectUnique() – Skapa en ny samling unika värden i en matris.
- substringIndex() – Extrahera delsträngen före n förekomster av en avgränsare.
- topN() – Returnera de översta n resultaten efter sortering av dina data.
- Hämta från källan som är tillgänglig i Uppdatering för scenarier för datakälländring Läs mer
- Användardefinierade funktioner (GA) – Skapa återanvändbara och anpassade uttryck för att undvika att skapa komplex logik om och om igen Läs mer Video
- Enklare konfiguration av dataflödeskörning – välj beräkningsstorlek bland små, medelstora och stora för att förkonfigurera alla inställningar för integreringskörning Läs mer
Kontinuerlig integrering och kontinuerlig leverans (CI/CD)
Inkludera globala parametrar som stöds i ARM-mallen. Läs mer
Utvecklarnas produktivitet
Var en del av förhandsversionsfunktionerna i Azure Data Factory Studio – Upplev de senaste Funktionerna i Azure Data Factory och var först med att dela din feedback Läs mer
Juni 2022
Videosammanfattning
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Fuzzy-koppling som stöds för dataflöden | Fuzzy-koppling stöds nu i Join transformation of data flows with configurable similarity score on join conditions (Anslut omvandling av dataflöden med konfigurerbar likhetspoäng för kopplingsvillkor). Läs mer |
| Redigeringsfunktioner i källprojektion | Redigeringsfunktioner i källprojektion är tillgängliga i Dataflöde för att göra schemaändringar enkelt Läs mer | |
| Kontroll av felhantering | Kontroll av felhantering stöds nu i dataflöden för datakvalitet och dataverifiering Läs mer | |
| Dataflytt | Parameterisering stöds internt i ytterligare 4 anslutningsappar | Vi har lagt till inbyggt gränssnittsstöd för parameterisering för följande länkade tjänster: Azure Data Lake Gen1, Azure PostgreSQL, Google AdWords och PostgreSQL. Läs mer |
| SAP Change Data Capture-funktioner (CDC) i den nya SAP ODP-anslutningsappen (offentlig förhandsversion) | Sap Change Data Capture-funktioner (CDC) stöds nu i den nya SAP ODP-anslutningsappen. Läs mer | |
| Integration Runtime | Time To Live i hanterat VNET (offentlig förhandsversion) | Time-To-Live kan ställas in på de etablerade beräkningen i det hanterade virtuella nätverket. Läs mer |
| Övervakning | Kör pipelinen igen med nya parametrar | Nu kan du köra pipelines igen med nya parametervärden i Azure Data Factory. Läs mer |
| Orkestrering | Egenskapen "turnOffAsync" är tillgänglig i webbaktivitet | Webbaktivitet stöder ett asynkront mönster för begäran-svar som anropar HTTP GET i fältet Plats i svarshuvudet för ett HTTP 202-svar. Det hjälper webbaktiviteten att automatiskt avsöka övervakningens slutpunkt tills jobbet körs. Egenskapen "turnOffAsync" stöds för att inaktivera det här beteendet i fall där avsökning inte behövs Läs mer |
Maj 2022
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Användardefinierade funktioner för att mappa dataflöden | Azure Data Factory introducerar användardefinierade funktioner och dataflödesbibliotek i offentlig förhandsversion. En användardefinierad funktion är ett anpassat uttryck som du kan definiera för att kunna återanvända logik i flera mappningsdataflöden. Användardefinierade funktioner finns i en samling som kallas ett dataflödesbibliotek för att enkelt kunna gruppera vanliga uppsättningar med anpassade funktioner. Läs mer |
April 2022
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Förbättringar av dataförhandsgranskning och felsökning i mappning av dataflöden | Felsökningssessioner med hjälp av AutoResolve Azure Integration Runtime (IR) startar nu på under 10 sekunder. Det finns nya uppdateringar av dataförhandsgranskningspanelen i mappning av dataflöden. Nu kan du sortera raderna i dataförhandsgranskningsvyn genom att välja kolumnrubriker. Du kan flytta runt kolumner interaktivt. Du kan också spara dataförhandsgranskningsresultatet som en CSV med hjälp av Exportera CSV. Läs mer |
| Dataverse-anslutningsprogram är tillgängligt för mappning av dataflöden | Dataverse-anslutningsappen är tillgänglig som källa och mottagare för att mappa dataflöden. Läs mer | |
| Stöd för användardatabasscheman för mellanlagring med Azure Synapse Analytics- och PostgreSQL-anslutningsappar i dataflödesmottagare | Dataflödesmottagaren stöder nu användning av ett användardatabasschema för mellanlagring i både Azure Synapse Analytics- och PostgreSQL-anslutningsappar. Läs mer | |
| Övervakning | Flera uppdateringar av Data Factory-övervakningsupplevelser | Nya uppdateringar av övervakningsupplevelsen i Data Factory omfattar möjligheten att exportera resultat till en CSV, rensa alla filter och öppna en körning på en ny flik. Cachelagring av kolumner och resultat förbättras också. Läs mer |
| Användargränssnitt | Stöd för nytt regionalt format | Om du väljer språk och regionalt format i inställningarna påverkas formatet för hur data, till exempel datum och tider, visas i Azure Data Factory Studio-övervakningen. Tidsformatet i Övervakning visas till exempel som "Apr 2, 2022, 3:40:29 pm" när du väljer engelska som regionalt format och "2 apr 2022, 15:40:29" när du väljer franska som regionalt format. De här inställningarna påverkar endast Användargränssnittet för Azure Data Factory Studio och ändrar inte dina faktiska data och tidszoner. |
Mars 2022
Videosammanfattning
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | ScriptLines och parametriserad länkad tjänst har stöd för tillagda mappningsdataflöden | Nu är det enkelt att identifiera ändringar i dataflödesskriptet i Git med ScriptLines i din JSON-definition för dataflöde. Parametriserade länkade tjänster kan nu också användas i dina dataflöden för flexibla allmänna anslutningsmönster. Läs mer |
| Allmän tillgänglighet för Flowlets (GA) | Flowlets är nu allmänt tillgängligt för att skapa återanvändbara delar av dataflödeslogik som du kan dela i andra pipelines som infogade transformeringar. Flowlets gör att ETL-jobb (extract-transform-and-load) kan bestå av anpassade eller vanliga logikkomponenter. Läs mer | |
| Anslutningsappar för ändringsflöde är tillgängliga i fem dataflödeskällatransformeringar | Anslutningsappar för ändringsflöde är tillgängliga i dataflödeskällomvandlingar för Azure Cosmos DB, Azure Blob Storage, Azure Data Lake Storage Gen1, Azure Data Lake Storage Gen2 och den gemensamma datamodellen (CDM). Läs mer | |
| Förbättringar av dataförhandsgranskning och felsökning i mappning av dataflöden | Nya funktioner har lagts till i förhandsversionen av data och felsökningsupplevelsen vid mappning av dataflöden. Läs mer | |
| SFTP-anslutningsapp för att mappa dataflöde | SFTP-anslutningsappen är tillgänglig för att mappa dataflöde som både källa och mottagare. Läs mer | |
| Dataförflyttning | Stöd för Always Encrypted för SQL-relaterade anslutningsappar i sökningsaktivitet under Hanterat virtuellt nätverk | Always Encrypted stöds för SQL Server, Azure SQL Database, Azure SQL Managed Instance och Synapse Analytics i sökningsaktiviteten under hanterat virtuellt nätverk. Läs mer |
| Integration runtime | Ny användargränssnittslayout i sidan för skapande och redigering av Azure IR | Användargränssnittslayouten för sidan skapa och redigera IR använder nu flikformat för Inställningar, Virtuellt nätverk och Dataflödeskörning. Läs mer |
| Orkestrering | Transformera data med hjälp av skriptaktiviteten | Du kan använda en skriptaktivitet för att anropa ett SQL-skript i SQL Database, Azure Synapse Analytics, SQL Server, Oracle eller Snowflake. Läs mer |
| Förbättring av tidsgränsen för webbaktivitet | Du kan konfigurera tidsgränsen för svar i en webbaktivitet så att den inte överskrider tidsgränsen om svarsperioden är mer än en minut, särskilt när det gäller synkrona API:er. Läs mer |
Februari 2022
Videosammanfattning
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Parametriserade länkade tjänster som stöds i mappning av dataflöden | Nu kan du använda dina parametriserade länkade tjänster för att mappa dataflöden för att göra dina dataflödespipelines generiska och flexibla. Läs mer |
| SQL Database-inkrementellt källextrakt som är tillgängligt i dataflödet (offentlig förhandsversion) | Ett nytt alternativ har lagts till vid mappning av SQL Database-källor för dataflöde med namnet Aktivera inkrementellt extrahering (förhandsversion). Nu kan du bara hämta de rader som har ändrats i dina SQL Database-källor automatiskt med hjälp av dataflöden. Läs mer | |
| Fyra nya anslutningsappar tillgängliga för mappning av dataflöden (offentlig förhandsversion) | Data Factory har nu stöd för fyra nya anslutningsappar (offentlig förhandsversion) för att mappa dataflöden: Quickbase-anslutningsprogram, Smartsheet-anslutningsprogram, TeamDesk-anslutningsprogram och Zendesk-anslutningsprogram. Läs mer | |
| Azure Cosmos DB (SQL API) för mappning av dataflöde stöder nu infogat läge | Azure Cosmos DB (SQL API) för att mappa dataflöde kan nu använda infogade datauppsättningar. Läs mer | |
| Dataförflyttning | Hämta pipelines för metadatadriven datainmatning i verktyget Data Factory Copy Data inom 10 minuter (GA) | Du kan skapa storskaliga datakopieringspipelines med en metadatadriven metod i verktyget Kopiera data inom 10 minuter. Läs mer |
| Api-uppgradering för Data Factory Google AdWords-anslutningsappen är tillgänglig | Data Factory Google AdWords-anslutningsappen stöder nu den nya AdWords API-versionen. Ingen åtgärd krävs för den nya anslutningsanvändaren eftersom den är aktiverad som standard. Läs mer | |
| Kontinuerlig integrering och kontinuerlig leverans (CI/CD) | Stöd för Azure DevOps för flera klientorganisationer | Konfigurera en lagringsplats med Hjälp av Azure DevOps Git inte i samma klientorganisation som Azure Data Factory。 Läs mer |
| Regionexpansion | Data Factory är nu tillgängligt i USA, västra 3 och Jio, indien, västra | Data Factory är nu tillgängligt i två nya regioner: USA, västra 3 och Jio, indien, västra. Du kan samplacera ditt ETL-arbetsflöde i dessa nya regioner om du använder dessa regioner för att lagra och hantera ditt moderna informationslager. Du kan också använda dessa regioner för affärskontinuitet och haveriberedskap om du behöver redundansväxla från en annan region inom geo-området. Läs mer |
| Säkerhet | Ansluta till ett Azure DevOps-konto i en annan Entra ID-klientorganisation | Du kan ansluta din Data Factory-instans till ett Azure DevOps-konto i en annan Azure AD-klientorganisation i källkontrollsyfte. Läs mer |
Januari 2022
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Snabb återanvändning sker nu automatiskt i alla Azure-IR:er som använder Time to Live (TTL) | Du behöver inte längre ange "snabb återanvändning" manuellt. Data Factory-mappning av dataflöden kan nu starta efterföljande dataflödesaktiviteter på under fem sekunder efter att du har angett en TTL. Läs mer |
| Hämta din anpassade Assert-beskrivning | I Assert-omvandlingen kan du definiera ditt eget dynamiska beskrivningsmeddelande. Du kan använda den nya funktionen assertErrorMessage() för att hämta meddelandet rad för rad och lagra det i måldata. Läs mer | |
| Automatisk schemaidentifiering i parsningstransformering | En ny funktion som läggs till i parsningstransformeringen gör det enkelt att automatiskt identifiera schemat för ett inbäddat komplext fält i en strängkolumn. Välj knappen Identifiera schema för att ställa in målschemat automatiskt. Läs mer | |
| Stöd för Dynamics 365-anslutningsprogram som både mottagare och källa | Nu kan du ansluta direkt till Dynamics 365 för att transformera dina Dynamics-data i stor skala med hjälp av den nya anslutningsappen för mappningsdataflöde för Dynamics 365. Läs mer | |
| Always Encrypted SQL-anslutningar är nu tillgängliga i dataflöden | Always Encrypted kan nu källtransformeringar i SQL Server, SQL Database, SQL Managed Instance och Azure Synapse när du använder dataflöden. Läs mer | |
| Dataförflyttning | Data Factory Azure Databricks Delta Lake-anslutningsprogrammet stöder nya autentiseringstyper | Data Factory Databricks Delta Lake-anslutningsprogrammet stöder nu ytterligare två autentiseringstyper: systemtilldelad hanterad identitetsautentisering och användartilldelad hanterad identitetsautentisering. Läs mer |
| Data Factory aktiviteten Kopiera stöder upsert i flera fler anslutningsappar | Data Factory aktiviteten Kopiera stöder nu upsert medan data skickas till SQL Server, SQL Database, SQL Managed Instance och Azure Synapse. Läs mer |
December 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Dynamics-anslutningsprogram som intern källa och mottagare för att mappa dataflöden | Dynamics-anslutningsappen stöds nu som källa och mottagare för att mappa dataflöden. Läs mer |
| Intern ändringsdatainsamling (CDC) stöds nu internt | CDC stöds nu internt i Data Factory för Azure Cosmos DB, Blob Storage, Data Lake Storage Gen1, Data Lake Storage Gen2 och CDM. Läs mer | |
| Offentlig förhandsversion av Flowlets | Med den offentliga förhandsversionen av flowlets kan dataflödesutvecklare skapa återanvändbara komponenter för att enkelt skapa komposterbar datatransformeringslogik. Läs mer | |
| Allmän förhandsversion av mappningsdata | Med förhandsversionen av Map Data kan företagsanvändare definiera kolumnmappning och transformeringar för att läsa in Azure Synapse Lake-databaser. Läs mer | |
| Flera utdatamål från Power Query | Nu kan du mappa flera utdatamål från Power Query i Data Factory för flexibla ETL-mönster för medborgardataintegratörer. Läs mer | |
| Stöd för extern samtalstransformering | Utöka funktionerna för att mappa dataflöden med hjälp av transformering av externa anrop. Nu kan du lägga till din egen anpassade kod som en REST-slutpunkt eller anropa en kuraterad tjänstrad från tredje part efter rad. Läs mer | |
| Aktivera snabb återanvändning av Azure Synapse-mappning av dataflöden med TTL-stöd | Azure Synapse-mappning av dataflöden stöder nu snabb återanvändning genom att ange en TTL i Azure IR. Med hjälp av en inställning kan dina efterföljande dataflödesaktiviteter köras på under fem sekunder. Läs mer | |
| Bekräfta transformering | Lägg enkelt till datakvalitet, validering av datadomäner och metadatakontroller i dina Data Factory-pipelines med hjälp av Assert-transformering i mappning av dataflöden. Läs mer | |
| IntelliSense-stöd i expression builder för mer produktiva pipelineredigeringsupplevelser | IntelliSense-stöd i uttrycksbyggare och dynamisk innehållsredigering gör Data Factory- och Azure Synapse-pipelineutvecklare mer produktiva medan de skriver komplexa uttryck i sina datapipelines. Läs mer |
November 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Kontinuerlig integrering och kontinuerlig leverans (CI/CD) | Förbättringar av GitHub-integrering | Förbättringar i Data Factory- och GitHub-integrering tar bort gränser för 1 000 Data Factory-resurser per resurstyp, till exempel datauppsättningar och pipelines. För stora datafabriker hjälper den här ändringen till att minska effekten av GitHub API-hastighetsgränsen. Läs mer |
| Dataflöde | Ange en anpassad felkod och ett felmeddelande med aktiviteten Fail | Med felaktivitet kan ETL-utvecklare ange felmeddelandet och anpassad felkod för en Data Factory-pipeline. Läs mer |
| Extern anropstransformering | Genom att mappa dataflöden kan ETL-utvecklare använda transformeringar och databerikningar som tillhandahålls av REST-slutpunkter eller API-tjänster från tredje part. Läs mer | |
| Snabb återanvändning av Synapse | När du kör dataflödet i Synapse Analytics använder du TTL-funktionen. TTL-funktionen använder funktionen för snabb återanvändning så att sekventiella dataflöden körs inom några sekunder. Du kan ange TTL när du konfigurerar en Azure IR. Läs mer | |
| Dataförflyttning | aktiviteten Kopiera stöder läsning av data från FTP eller SFTP utan segmentering | Bestäm automatiskt fillängden eller den relevanta förskjutningen som ska läsas när du kopierar data från en FTP- eller SFTP-server. Med den här funktionen ansluter Data Factory automatiskt till FTP- eller SFTP-servern för att fastställa fillängden. När längden har bestämts delar Data Factory upp filen i flera segment och läser dem parallellt. Läs mer |
| UTF-8 utan bomstöd i aktiviteten Kopiera | aktiviteten Kopiera stöder skrivning av data med kodning av typen UTF-8 utan bom för JSON och avgränsade textdatauppsättningar. | |
| Stöd för avgränsare för flera kolumner | aktiviteten Kopiera stöder användning av kolumnavgränsare med flera tecken för avgränsade textdatauppsättningar. | |
| Integration runtime | Kör valfri process var som helst i tre steg med SQL Server Integration Services (SSIS) i Data Factory | Lär dig hur du använder det bästa av datafabriks- och SSIS-funktioner i en pipeline. Ett SSIS-exempelpaket med parametriserade egenskaper hjälper dig att få en snabbstart. Med Data Factory Studio kan SSIS-paketet enkelt dras och släppas till en pipeline och användas som en del av en Execute SSIS Package-aktivitet. Med den här funktionen kan du köra Data Factory-pipelinen med ett SSIS-paket på lokalt installerad IR eller SSIS IR. Genom att tillhandahålla körningsparametervärden kan du använda de kraftfulla funktionerna i Data Factory och SSIS tillsammans. Den här artikeln illustrerar tre steg för att köra en process, som kan vara valfri körbar fil, till exempel ett program, ett program, ett verktyg eller en batchfil, var som helst. Läs mer |
Oktober 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataflöde | Azure Data Explorer och AWS S3-anslutningsappar (Amazon Web Services) | Microsoft Dataintegration-teamet har släppt två nya anslutningsappar för att mappa dataflöden. Om du använder Azure Synapse kan du nu ansluta direkt till dina AWS S3-bucketar för datatransformeringar. I både Data Factory och Azure Synapse kan du nu ansluta internt till dina Azure Data Explorer-kluster i mappning av dataflöden. Läs mer |
| Power Query-aktiviteten lämnar förhandsversionen för GA | Data Factory Power Query-pipelineaktiviteten är nu allmänt tillgänglig. Den här nya funktionen ger utskalade dataförberedelser och dataomvandling för medborgarintegrerare i datafabrikens webbläsargränssnitt för en integrerad upplevelse för datatekniker. Power Query-dataomvandlingsfunktionen i Data Factory ger en kraftfull, lättanvänd pipelinefunktion för att lösa dina mest komplexa dataintegrerings- och ETL-mönster i en enda tjänst. Läs mer | |
| Ny Stringify-datatransformering i mappning av dataflöden | Mappning av dataflöden lägger till en ny datatransformering med namnet Stringify för att göra det enkelt att konvertera komplexa datatyper som structs och matriser till strängform. Dessa datatyper kan sedan skickas till strukturerade utdatamål. Läs mer | |
| Integration runtime | Express virtual network injection for SSIS IR (offentlig förhandsversion) | SSIS IR stöder nu expressinmatning av virtuella nätverk. Läs mer: Översikt över virtuell nätverksinmatning för SSIS IR Standard kontra express virtuell nätverksinmatning för SSIS IR Express virtual network injection for SSIS IR |
| Säkerhet | Integreringsförbättring för Azure Key Vault | Key Vault-integrering har nu listrutor så att användarna kan välja de hemliga värdena i den länkade tjänsten. Den här funktionen ökar produktiviteten eftersom användarna inte behöver skriva in hemligheterna, vilket kan leda till mänskliga fel. |
| Stöd för användartilldelad hanterad identitet i Data Factory | Säkerhet för autentiseringsuppgifter är avgörande för alla företag. Data Factory-teamet har åtagit sig att göra datateknikprocessen säker men ändå enkel för datatekniker. Användartilldelad hanterad identitet (förhandsversion) stöds nu i alla anslutningsappar och länkade tjänster som stöder Azure AD-baserad autentisering. Läs mer |
September 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Kontinuerlig integrering och kontinuerlig leverans | Utökade CI/CD-funktioner | Nu kan du skapa en ny Git-gren baserat på vilken annan gren som helst i Data Factory. Läs mer |
| Dataförflyttning | Amazon Relational Database Service (RDS) för Oracle-källor | Amazon RDS för Oracle-källor är nu tillgängligt i både Data Factory och Azure Synapse. Läs mer |
| Amazon RDS för SQL Server-källor | Amazon RDS för SQL Server-källanslutningen är nu tillgänglig i både Data Factory och Azure Synapse. Läs mer | |
| Stöd för parallell kopiering från Azure Database for PostgreSQL | Azure Database for PostgreSQL-anslutningsappen stöder nu parallella kopieringsåtgärder. Läs mer | |
| Dataflöde | Använda Data Lake Storage Gen2 för att köra för- och efterbearbetningskommandon | För- och efterbearbetningskommandon för Hadoop Distributed File System kan nu köras med hjälp av Data Lake Storage Gen2-mottagare i dataflöden. Läs mer |
| Redigera dataflödesegenskaper för befintliga instanser av Azure IR | Azure IR har uppdaterats för att tillåta redigering av dataflödesegenskaper för befintliga IR:er. Du kan nu ändra dataflödesberäkningsegenskaper utan att behöva skapa en ny Azure IR. Läs mer | |
| TTL-inställning för Azure Synapse för att förbättra starttiden för pipelineaktiviteter | Azure Synapse har lagt till TTL i Azure IR så att dina dataflödespipelines aktiviteter kan börja köras på några sekunder, vilket avsevärt minimerar körningen av dina dataflödespipelines. Läs mer | |
| Integration runtime | Allmän tillgänglighet för datafabrikshanterat virtuellt nätverk | Nu kan du etablera Azure IR som en del av ett hanterat virtuellt nätverk och använda privata slutpunkter för att på ett säkert sätt ansluta till datalager som stöds. Datatrafiken går via Azure Private Links, som ger säker anslutning till datakällan. Det förhindrar också dataexfiltrering till det offentliga Internet. Läs mer |
| Orkestrering | Operationalisera och tillhandahålla serviceavtal för datapipelines | Det nya måttet Förflutiterad tidspipelinekörning i kombination med Data Factory-aviseringar gör det möjligt för datapipelines utvecklare att bättre leverera serviceavtal till sina kunder. Nu kan du berätta hur länge en pipeline ska köras och vi meddelar dig proaktivt när pipelinen körs längre än förväntat. Läs mer |
| Felaktivitet (offentlig förhandsversion) | Med den nya felaktiviteten kan du utlösa ett fel i en pipeline avsiktligt av någon anledning. Du kan till exempel använda aktiviteten Fel om en sökningsaktivitet inte returnerar matchande data eller om en anpassad aktivitet avslutas med ett internt fel. Läs mer |
Augusti 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Kontinuerlig integrering och kontinuerlig leverans | CI/CD-förbättringar med GitHub-stöd i Azure Government och Microsoft Azure som drivs av 21Vianet | Vi har lagt till stöd för GitHub i Azure för amerikanska myndigheter och Azure som drivs av 21Vianet. Läs mer |
| Dataförflyttning | Azure Cosmos DB API för MongoDB-anslutningsappen stöder version 3.6 och 4.0 i Data Factory | Data Factory Azure Cosmos DB API för MongoDB-anslutningsappen stöder nu serverversionerna 3.6 och 4.0. Läs mer |
| Förbättra användningen av COPY-instruktionen för att läsa in data i Azure Synapse | Data Factory Azure Synapse-anslutningsappen stöder nu mellanlagrad kopierings- och kopieringskälla med *.* som jokerteckenFilename för COPY-instruktionen. Läs mer | |
| Dataflöde | REST-slutpunkter är tillgängliga som källa och mottagare i dataflödet | Dataflöden i Data Factory och Azure Synapse har nu stöd för REST-slutpunkter som både källa och mottagare med fullt stöd för både JSON- och XML-nyttolaster. Läs mer |
| Integration runtime | Diagnostikverktyget är tillgängligt för lokalt installerad IR | Ett diagnostikverktyg för lokalt installerad IR är utformat för att ge en bättre användarupplevelse och hjälpa användare att hitta potentiella problem. Verktyget kör en serie testscenarier på den lokalt installerade IR-datorn. Varje scenario har typiska hälsokontrollfall för vanliga problem. Läs mer |
| Orkestrering | Anpassad händelseutlösare med avancerat filtreringsalternativ GA | Nu kan du skapa en utlösare som svarar på ett anpassat ämne som publicerats i Azure Event Grid. Du kan också använda avancerad filtrering för att få detaljerad kontroll över vilka händelser du ska svara på. Läs mer |
Juli 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataförflyttning | Hämta pipelines för metadatadriven datainmatning i verktyget Data Factory Copy Data inom 10 minuter (offentlig förhandsversion) | Nu kan du skapa storskaliga datakopieringspipelines med en metadatadriven metod i verktyget Kopiera data (offentlig förhandsversion) inom 10 minuter. Läs mer |
| Dataflöde | Nya kartfunktioner har lagts till i dataflödestransformeringsfunktioner | Med en ny uppsättning funktioner för dataflödestransformering kan datatekniker enkelt generera, läsa och uppdatera kartdatatyper och komplexa kartstrukturer. Läs mer |
| Integration runtime | Fem nya regioner är tillgängliga i datafabrikens hanterade virtuella nätverk (offentlig förhandsversion) | Fem nya regioner, China East2, China North2, US Government Arizona, US Government Texas och US Government Virginia, är tillgängliga i datafabrikens hanterade virtuella nätverk (offentlig förhandsversion). |
| Utvecklarnas produktivitet | Förbättringar av startsidan för Data Factory | Startsidan för Data Factory har gjorts om med bättre kontrast- och omflödesfunktioner. Några avsnitt introduceras på startsidan för att hjälpa dig att förbättra produktiviteten i din dataintegreringsresa. Läs mer |
| Ny landningssida för Data Factory Studio | Landningssidan för fönstret Data Factory i Azure Portal. Läs mer |
Juni 2021
| Tjänstkategori | Tjänstförbättringar | Detaljer |
| Dataförflyttning | Ny användarupplevelse med datafabrikens verktyg för kopieringsdata | Det omdesignade verktyget Kopiera data är nu tillgängligt med förbättrad datainmatning. Läs mer |
| MongoDB och MongoDB Atlas stöds som både källa och mottagare | Den här förbättringen stöder kopiering av data mellan alla datalager som stöds och MongoDB- eller MongoDB Atlas-databasen. Läs mer | |
| Always Encrypted stöds för SQL Database, SQL Managed Instance och SQL Server-anslutningsappar som både källa och mottagare | Always Encrypted är tillgängligt i Data Factory för SQL Database, SQL Managed Instance och SQL Server-anslutningsappar för aktiviteten Kopiera. Läs mer | |
| Inställning av anpassade metadata stöds i aktiviteten Kopiera när du sjunker till Data Lake Storage Gen2 eller Blob Storage | När du skriver till Data Lake Storage Gen2 eller Blob Storage stöder aktiviteten Kopiera inställning av anpassade metadata eller lagring av källfilens senast ändrade information som metadata. Läs mer | |
| Dataflöde | SQL Server stöds nu som källa och mottagare i dataflöden | SQL Server stöds nu som källa och mottagare i dataflöden. Följ länken för instruktioner om hur du konfigurerar ditt nätverk med hjälp av azure IR-funktionen för hanterat virtuellt nätverk för att prata med dina LOKALA SQL Server- och molnbaserade VM-baserade instanser. Läs mer |
| Snabb återanvändning av dataflödeskluster är nu aktiverat som standard för alla nya Azure IR:n | Den populära funktionen för snabb återanvändning av dataflöden är nu allmänt tillgänglig för Data Factory. Alla nya Azure IR:er har nu snabb återanvändning aktiverat som standard. Läs mer | |
| Power Query-aktivitet (offentlig förhandsversion) | Nu kan du skapa komplexa fältmappningar till Power Query-mottagaren med dataomvandling i Data Factory. Mottagaren har nu konfigurerats i pipelinen i power query-aktiviteten (offentlig förhandsversion) för att hantera den här uppdateringen. Läs mer | |
| Uppdaterade användargränssnittet för övervakning av dataflöden i Data Factory | Data Factory har en ny uppdatering för övervakningsgränssnittet för att göra det enklare att visa ETL-jobbkörningar för dataflöde och snabbt identifiera områden för prestandajustering. Läs mer | |
| SQL Server Integration Services | Kör sql-instruktioner eller skript var som helst i tre steg med SSIS i Data Factory | Det här inlägget innehåller tre steg för att köra sql-instruktioner eller skript var som helst med SSIS i Data Factory.
|