Nieuw archief voor Azure Data Factory
Azure Data Factory wordt voortdurend verbeterd. Als u op de hoogte wilt blijven van de meest recente ontwikkelingen, raadpleegt u de huidige pagina What's New , die u informatie geeft over:
- De nieuwste releases.
- Bekende problemen.
- Insectenmoeilijke.
- Afgeschafte functionaliteit.
- Plannen voor wijzigingen.
Deze archiefpagina bewaart updates van oudere maanden.
Bekijk ons archief met nieuwe video's voor al onze maandelijkse updates.
September 2023
Pipelines
Ondersteuning toegevoegd voor pijplijnen op basis van metagegevens voor dynamische volledige en incrementele verwerking in Azure SQL Meer informatie
Augustus 2023
Change Data Capture
- Azure Synapse Analytics-doelbeschikbaarheid in CDC-resource op het hoogste niveau Meer informatie
- Snowflake-connector in toewijzings-Gegevensstroom-ondersteuning voor Change Data Capture in openbare preview
Gegevensstroom
- Type geheel getal dat beschikbaar is voor pijplijnvariabelen Meer informatie
- Snowflake CDC-bronconnector beschikbaar in CDC-resource op het hoogste niveau
- Systeemeigen UI-ondersteuning voor parameterisatie voor meer gekoppelde services Meer informatie
Gegevensverplaatsing
- Ondersteuning voor beheerde privé-eindpunten voor Application Gateway en MySQL Flexible Server Meer informatie
- Algemene beschikbaarheid van managed virtual network time-to-live (TTL)
Integration Runtime
Zelf-hostende Integration Runtime biedt nu ondersteuning voor zelf-ingesloten interactieve creatie (preview) Meer informatie
Juli 2023
Change Data Capture
CDC-resource op het hoogste niveau ondersteunt nu de ontwikkeling van schema's. Meer informatie
Gegevensstroom
De optie Schema samenvoegen in deltasink ondersteunt nu de ontwikkeling van schema's in toewijzings-Gegevensstroom s. Meer informatie
Gegevensverplaatsing
- Markeer een deel van de pijplijn met deactivering. Meer informatie
- De retourwaarde van de pijplijn is nu algemeen beschikbaar. Meer informatie
Productiviteit van ontwikkelaars
De zoekfunctie voor documentatie is nu opgenomen in de zoekwerkbalk van Azure Data Factory. Meer informatie
Juni 2023
Doorlopende integratie en doorlopende implementatie
npm-pakket ondersteunt nu vooraf gedownloade bundel voor het bouwen van ARM-sjablonen. Als de firewallinstelling het direct downloaden voor uw npm-pakket blokkeert, kunt u het pakket vooraf vooraf laden en npm-pakket lokale versie laten gebruiken. Dit is een super boost voor uw CI/CD-pijplijn in een firewallomgeving.
Regio-uitbreiding
Azure Data Factory is nu beschikbaar in Zweden - centraal. U kunt uw ETL-werkstroom in deze nieuwe regio co-locatie vinden als u de regio gebruikt voor het opslaan en beheren van uw moderne datawarehouse. Meer informatie
Gegevensverplaatsing
Het beveiligen van uitgaand verkeer met de uitgaande netwerkregels van Azure Data Factory wordt nu ondersteund. Meer informatie
Connectors
De Amazon S3-connector wordt nu ondersteund als sinkbestemming met behulp van toewijzings-Gegevensstroom s. Meer informatie
Gegevensstroom
We introduceren optionele broninstellingen voor DelimitedText- en JSON-bronnen in CDC-resource op het hoogste niveau. De CDC-resource op het hoogste niveau in data factory ondersteunt nu optionele bronconfiguraties voor gescheiden en JSON-bronnen. U kunt nu de kolom-/rijscheidingstekens selecteren voor gescheiden bronnen en het documenttype voor JSON-bronnen instellen. Meer informatie
Mei 2023
Data Factory in Microsoft Fabric
Data factory in Microsoft Fabric biedt cloudgebaseerde services voor gegevensverplaatsing en gegevenstransformatie waarmee u de meest complexe data factory- en ETL-scenario's kunt oplossen. Het is bedoeld om uw data factory-ervaring eenvoudig te gebruiken, krachtig en echt zakelijk te maken.
April 2023
Gegevensstroom
U kunt eenvoudig meerdere matrices uitschrijven in ADF-gegevensstromen. ADF heeft de platte transformatie bijgewerkt waarmee het nu super eenvoudig is om meerdere matrices uit te schrijven uit één stap voor platte transformatie. Meer informatie
Doorlopende integratie en doorlopende implementatie
U kunt het doorvoerbericht nu aanpassen in de Git-modus. Typ een gedetailleerde beschrijving over de wijzigingen die u aanbrengt en we slaan deze op in de Git-opslagplaats.
Connectors
De Azure Blob Storage-connector ondersteunt nu anonieme verificatie. Meer informatie
Maart 2023
Connectors
Azure Data Lake Storage Gen2-connector biedt nu ondersteuning voor shared access Signature-verificatie. Meer informatie
2023 februari
Gegevensverplaatsing
- Anoniem verificatietype ondersteund voor Azure Blob Storage Meer informatie
- Sap-sjabloon bijgewerkt om EENVOUDIG SAP-gegevens te verplaatsen naar ADLSGen2 in Delta-indeling Voor meer informatie
Orchestration
- Waarde voor pijplijnuitvoer instellen (openbare preview) Meer informatie
- Werkstroomindelingsbeheer (openbare preview) Meer informatie
Productiviteit van ontwikkelaars
Ondersteuning voor donker thema toegevoegd (openbare preview) Meer informatie
Januari 2023
Gegevensstroom
- Flowlets bieden nu ondersteuning voor schemadrift Voor meer informatie
- Incrementeel extraheren van SQL CDC biedt nu ondersteuning voor numerieke kolommen Meer informatie
Gegevensverplaatsing
Nieuwe CDC-resource op het hoogste niveau - systeemeigen CDC-configuratie in drie eenvoudige stappen
Orchestration
Synapse-notebooks en Synapse Spark-taakdefinities organiseren
Regio-uitbreiding
- Continue regio-uitbreiding - China - Noord 3 heeft nu meer informatie ondersteund
- Continue regio-uitbreiding - Zwitserland - west ondersteunt nu meer informatie
SQL Server Integration Services (SSIS)
Express virtual network injection for SSIS now generally available Learn more
Productiviteit van ontwikkelaars
- Ondersteuning toegevoegd voor voorkeursbronnen op de startpagina
- Kolombreedte opslaan voor pijplijnbewaking
- Filterupdates controleren voor snellere zoekopdrachten
- Galerie pijplijnsjablonen rechtstreeks starten via Azure Portal
December 2022
Gegevensstroom
Incrementeel extraheren van SQL Change Data Capture (CDC) - biedt ondersteuning voor numerieke kolommen in toewijzingsgegevensstroom Voor meer informatie
Gegevensverplaatsing
Express Virtual Network-injectie voor SSIS in Azure Data Factory is algemeen beschikbaar voor meer informatie
Regio-uitbreiding
Continue regio-uitbreiding - Azure Data Factory is nu beschikbaar in China - noord 3 Meer informatie
november 2022
Gegevensstroom
- Incrementeel is alleen beschikbaar in SAP CDC: alleen wijzigingen ophalen uit het SAP-systeem zonder de eerste volledige belasting
- Bronpartities bij de eerste volledige gegevensbelasting van SAP CDC om de prestaties te verbeteren Meer informatie
- Een nieuwe pijplijnsjabloon - Meerdere objecten laden met grote hoeveelheden van SAP via SAP CDC Meer informatie
Gegevensverplaatsing
- Meer informatie over ondersteuning voor Azure Databricks via een privékoppeling vanuit een beheerd virtueel data factory-netwerk
Gebruikersinterface
2 Verbeteringen voor pijplijnontwerper toegevoegd aan de preview-ervaring van ADF Studio
- Flyout voor dynamische inhoud: maak het gemakkelijker om dynamische inhoud in uw pijplijnactiviteiten in te stellen zonder de opbouwfunctie voor expressies te gebruiken. Meer informatie
- De verplaatsing van foutberichten naar de statuskolom: het is eenvoudiger voor u om fouten weer te geven wanneer u een mislukte pijplijnuitvoering ziet. Meer informatie
Doorlopende integratie en doorlopende implementatie
In de configuratie voor automatisch publiceren is de knop Publiceren uitschakelen beschikbaar om de laatste geautomatiseerde publicatie-implementatie te overschrijven. Meer informatie
Oktober 2022
Videosamenvatting
Gegevensstroom
- Meer informatie over het exporteren van maximaal 1000 rijen uit de voorbeeldweergave van de gegevensstroom
- Meer informatie over SQL CDC in toewijzings-Gegevensstroom s (openbare preview)
- Geavanceerde analyses ontgrendelen met Microsoft 365-toewijzingen Gegevensstroom Connector Voor meer informatie
- SAP Change Data Capture (CDC) in nu algemeen beschikbare meer informatie
Productiviteit van ontwikkelaars
- Nu communitybijdragen accepteren in de sjabloongalerie meer informatie
- Nieuw ontwerp in Azure Portal - ontdek eenvoudig hoe u ADF Studio start Voor meer informatie
- Learning Center is nu beschikbaar in Azure Data Factory Studio Voor meer informatie
- Met één klik kunt u Azure Data Factory meer informatie proberen
Orchestration
- Gedetailleerde factureringsweergave beschikbaar voor ADF - zie gedetailleerde factureringsgegevens per pijplijn (openbare preview) Meer informatie
- Time-out voor uitvoering van scriptactiviteit kan nu worden geconfigureerd voor meer informatie
Regio-uitbreiding
Continue regio-uitbreiding - Qatar Central ondersteunt nu meer informatie
Doorlopende integratie en doorlopende implementatie
Pijplijntriggers uitsluiten die niet zijn gewijzigd in de implementatie, nu algemeen beschikbaar , meer informatie
September 2022
Videosamenvatting
Gegevensstroom
- Amazon S3-bronconnector heeft meer informatie toegevoegd
- Google Sheets REST-connector toegevoegd als bron (preview) Meer informatie
- Maximale kolomoptimalisatie in gegevensstroom Meer informatie
- SAP Change Data Capture-mogelijkheden in toewijzing Gegevensstroom (preview) - Gegevenswijzigingen uit SAP-systemen extraheren en transformeren voor een efficiëntere gegevensvernieuwing Meer informatie
- Gegevens schrijven naar een opzoekveld via alternatieve sleutels die worden ondersteund in Dynamics 365/CRM-connectors voor toewijzingsgegevensstromen Meer informatie
Gegevensverplaatsing
Ondersteuning voor het converteren van Oracle NUMBER-type naar een corresponderend geheel getal in de bron voor meer informatie
Controleren
- Meer informatie over aanvullende bewakingsverbeteringen in Azure Data Factory
- Verbeteringen in het laden bewaken: groepeergegevens van pijplijn opnieuw uitvoeren die alleen worden opgehaald wanneer ze zijn uitgevouwen
- Paginering toegevoegd aan de weergave uitvoeringen van pijplijnactiviteiten om alle activiteitsrecords in pijplijnuitvoering weer te geven
- Verbetering van het verbruik bewaken : pictogram laden toegevoegd om te weten wanneer het verbruiksrapport volledig wordt berekend
- Aanvullende sorteerkolommen in bewaking: sorteren toegevoegd voor pijplijnnaam, Einde van uitvoering en Status
- Tijdzone-instellingen worden nu opgeslagen in bewaking
- Gantt-diagramweergave wordt nu ondersteund in IR-bewaking voor meer informatie
Orchestration
De METHODE DELETE in de webactiviteit ondersteunt nu het verzenden van een hoofdtekst met HTTP-aanvraag voor meer informatie
Gebruikersinterface
- Systeemeigen UI-ondersteuning voor parameterisatie toegevoegd voor 6 extra gekoppelde services - SAP ODP, ODBC, Microsoft Access, Informix, Snowflake en DB2 Meer informatie
- Verbeteringen in de pijplijnontwerper die zijn toegevoegd in de preview-ervaring van Studio: gebruikers kunnen de werkstroom in pijplijnobjecten bekijken, zoals For Each, If Then, enzovoort. Meer informatie
Augustus 2022
Videosamenvatting
Gegevensstroom
- Appfigures-connector toegevoegd als bron (preview) Meer informatie
- Cast-transformatie toegevoegd - gegevenstypen visueel converteren Meer informatie
- Nieuwe gebruikersinterface voor inlinegegevenssets : categorieën die zijn toegevoegd om eenvoudig gegevensbronnen te vinden
Gegevensverplaatsing
Verificatietype service-principal toegevoegd voor Azure Blob Storage Meer informatie
Productiviteit van ontwikkelaars
- Time-out van standaardactiviteit is gewijzigd van 7 dagen in 12 uur Voor meer informatie
- Nieuwe ervaring voor het maken van een data factory: één klik om uw fabriek binnen enkele seconden gereed te maken
- Ui-update voor opbouwfunctie voor expressies - categorische tabbladen toegevoegd voor eenvoudiger gebruik
Continue integratie en continue levering (CI/CD)
Wanneer CI/CD ARM-sjabloon integreert in plaats van alle triggers uit te schakelen, kan het triggers uitsluiten die niet zijn gewijzigd in de implementatie Meer informatie
Juli 2022
Videosamenvatting
Gegevensstroom
- Asana-connector toegevoegd als bron voor meer informatie
- Drie nieuwe functies voor gegevenstransformatie worden nu ondersteund voor meer informatie
- collectUnique() - Maak een nieuwe verzameling unieke waarden in een matrix.
- substringIndex() - Extraheer de subtekenreeks vóór n exemplaren van een scheidingsteken.
- topN() - Retourneer de bovenste n resultaten na het sorteren van uw gegevens.
- Refetch from source available in Refresh for data source change scenarios Learn more
) (Refetch from source available in Refresh for - Door de gebruiker gedefinieerde functies (GA): herbruikbare en aangepaste expressies maken om te voorkomen dat complexe logica wordt opgebouwd via en over Meer informatie
- Eenvoudigere configuratie voor de runtime van de gegevensstroom- en rekenkracht kiezen tussen Small, Medium en Large om alle integration runtime-instellingen vooraf te configureren. Meer informatie
Continue integratie en continue levering (CI/CD)
Voeg globale parameters toe die worden ondersteund in een ARM-sjabloon. Meer informatie
Productiviteit van ontwikkelaars
Maak deel uit van de preview-functies van Azure Data Factory Studio - Ervaar de nieuwste mogelijkheden van Azure Data Factory en wees de eerste om uw feedback te delen Meer informatie
Juni 2022
Videosamenvatting
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Fuzzy join ondersteund voor gegevensstromen | Fuzzy join wordt nu ondersteund in jointransformatie van gegevensstromen met configureerbare overeenkomstenscore voor joinvoorwaarden. Meer informatie |
| Bewerkingsmogelijkheden in bronprojectie | Bewerkingsmogelijkheden in bronprojectie zijn beschikbaar in de gegevensstroom om schema's eenvoudig te wijzigen Meer informatie | |
| Foutafhandeling bevestigen | Foutafhandeling bevestigen wordt nu ondersteund in gegevensstromen voor gegevenskwaliteit en gegevensvalidatie Meer informatie | |
| Gegevensverplaatsing | Parameterisatie wordt systeemeigen ondersteund in extra 4 connectors | We hebben systeemeigen UI-ondersteuning toegevoegd voor parameters voor de volgende gekoppelde services: Azure Data Lake Gen1, Azure PostgreSQL, Google AdWords en PostgreSQL. Meer informatie |
| MOGELIJKHEDEN van SAP Change Data Capture (CDC) in de nieuwe SAP ODP-connector (openbare preview) | DE MOGELIJKHEDEN van SAP Change Data Capture (CDC) worden nu ondersteund in de nieuwe SAP ODP-connector. Meer informatie | |
| Integration Runtime | Time-To-Live in beheerd VNET (openbare preview) | Time-To-Live kan worden ingesteld op de ingerichte berekeningen in het beheerde VNET. Meer informatie |
| Bewaking | Pijplijn opnieuw uitvoeren met nieuwe parameters | U kunt nu pijplijnen opnieuw uitvoeren met nieuwe parameterwaarden in Azure Data Factory. Meer informatie |
| Orchestration | De eigenschap turnOffAsync is beschikbaar in webactiviteit | Webactiviteit ondersteunt een asynchroon antwoordpatroon dat HTTP GET aanroept op het veld Locatie in de antwoordheader van een HTTP 202-antwoord. Hiermee wordt webactiviteit automatisch gecontroleerd op het eindpunt van de bewaking totdat de taak wordt uitgevoerd. De eigenschap turnOffAsync wordt ondersteund om dit gedrag uit te schakelen in gevallen waarin polling niet nodig is Meer informatie |
Mei 2022
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Door de gebruiker gedefinieerde functies voor toewijzingsgegevensstromen | Azure Data Factory introduceert in door de gebruiker gedefinieerde openbare preview-functies en gegevensstroombibliotheken. Een door de gebruiker gedefinieerde functie is een aangepaste expressie die u kunt definiëren om logica te kunnen hergebruiken voor meerdere toewijzingsgegevensstromen. Door de gebruiker gedefinieerde functies bevinden zich in een verzameling die een gegevensstroombibliotheek wordt genoemd, zodat u eenvoudig algemene sets met aangepaste functies kunt groeperen. Meer informatie |
April 2022
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Verbeteringen voor gegevensvoorbeelden en foutopsporing in toewijzingsgegevensstromen | Fouten opsporen in sessies met behulp van de AutoResolve Azure Integration Runtime (IR) wordt nu binnen 10 seconden opgestart. Er zijn nieuwe updates voor het deelvenster Gegevensvoorbeeld in toewijzingsgegevensstromen. U kunt nu de rijen in de voorbeeldweergave van de gegevens sorteren door kolomkoppen te selecteren. U kunt kolommen interactief verplaatsen. U kunt de resultaten van het gegevensvoorbeeld ook opslaan als csv met behulp van CSV exporteren. Meer informatie |
| Dataverse-connector is beschikbaar voor toewijzingsgegevensstromen | De Dataverse-connector is beschikbaar als bron en sink voor toewijzingsgegevensstromen. Meer informatie | |
| Ondersteuning voor gebruikersdatabaseschema's voor fasering met de Azure Synapse Analytics- en PostgreSQL-connectors in de sink voor gegevensstromen | De gegevensstroomsink ondersteunt nu het gebruik van een databaseschema voor gebruikers voor fasering in zowel de Azure Synapse Analytics- als PostgreSQL-connectors. Meer informatie | |
| Bewaking | Meerdere updates voor bewakingservaringen van Data Factory | Nieuwe updates voor de bewakingservaring in Data Factory omvatten de mogelijkheid om resultaten te exporteren naar een CSV, alle filters te wissen en een uitvoering op een nieuw tabblad te openen. Kolom- en resultaatcache wordt ook verbeterd. Meer informatie |
| Gebruikersinterface | Ondersteuning voor nieuwe regionale indeling | Het kiezen van uw taal en de regionale indeling in instellingen is van invloed op de indeling van de wijze waarop gegevens, zoals datums en tijden, worden weergegeven in de Bewaking van Azure Data Factory Studio. De tijdnotatie in Bewaking wordt bijvoorbeeld weergegeven als "2 apr 2, 2022, 3:40:29 pm" bij het kiezen van Engels als regionale indeling en "2 apr 2022, 15:40:29" bij het kiezen van Frans als regionale indeling. Deze instellingen zijn alleen van invloed op de gebruikersinterface van Azure Data Factory Studio en wijzigen uw werkelijke gegevens en tijdzone niet. |
Maart 2022
Videosamenvatting
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | ScriptLines en geparameteriseerde gekoppelde service bieden ondersteuning voor toegevoegde toewijzingsgegevensstromen | Het is nu eenvoudig om wijzigingen in uw gegevensstroomscript in Git te detecteren met ScriptLines in de JSON-definitie van uw gegevensstroom. Gekoppelde services met parameters kunnen nu ook worden gebruikt in uw gegevensstromen voor flexibele algemene verbindingspatronen. Meer informatie |
| Algemene beschikbaarheid van Flowlets (GA) | Flowlets is nu algemeen beschikbaar om herbruikbare delen van gegevensstroomlogica te maken die u in andere pijplijnen kunt delen als inlinetransformaties. Met flowlets kunnen ETL-taken (extract-transform-and-load) bestaan uit aangepaste of algemene logische onderdelen. Meer informatie | |
| Connectors voor wijzigingenfeeds zijn beschikbaar in vijf gegevensstroombrontransformaties | Connectors voor wijzigingenfeeds zijn beschikbaar in gegevensstroombrontransformaties voor Azure Cosmos DB, Azure Blob Storage, Azure Data Lake Storage Gen1, Azure Data Lake Storage Gen2 en het common data model (CDM). Meer informatie | |
| Verbeteringen voor gegevensvoorbeelden en foutopsporing in toewijzingsgegevensstromen | Er zijn nieuwe functies toegevoegd aan de preview van gegevens en de foutopsporingservaring in toewijzingsgegevensstromen. Meer informatie | |
| SFTP-connector voor toewijzingsgegevensstroom | SFTP-connector is beschikbaar voor toewijzingsgegevensstroom als bron en sink. Meer informatie | |
| Gegevensverplaatsing | Ondersteuning voor Always Encrypted voor SQL-gerelateerde connectors in opzoekactiviteit onder Beheerd virtueel netwerk | Always Encrypted wordt ondersteund voor SQL Server, Azure SQL Database, Azure SQL Managed Instance en Synapse Analytics in de opzoekactiviteit onder beheerd virtueel netwerk. Meer informatie |
| Integration Runtime | Nieuwe indeling van de gebruikersinterface in azure IR-pagina maken en bewerken | De indeling van de gebruikersinterface van de pagina IR maken en bewerken maakt nu gebruik van tabstijl voor instellingen, virtueel netwerk en gegevensstroomruntime. Meer informatie |
| Orchestration | Gegevens transformeren met behulp van de scriptactiviteit | U kunt een scriptactiviteit gebruiken om een SQL-script aan te roepen in SQL Database, Azure Synapse Analytics, SQL Server, Oracle of Snowflake. Meer informatie |
| Time-outverbetering voor webactiviteit | U kunt de time-out van reacties in een webactiviteit configureren om te voorkomen dat er een time-out optreedt als de reactieperiode meer dan één minuut is, met name in het geval van synchrone API's. Meer informatie |
Februari 2022
Videosamenvatting
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Gekoppelde gekoppelde services die worden ondersteund in toewijzingsgegevensstromen | U kunt nu uw gekoppelde geparameteriseerde services gebruiken bij het toewijzen van gegevensstromen om uw gegevensstroompijplijnen algemeen en flexibel te maken. Meer informatie |
| Incrementeel sql Database-bronextract beschikbaar in gegevensstroom (openbare preview) | Er is een nieuwe optie toegevoegd voor SQL Database-bronnen voor toewijzingsgegevensstromen met de naam Incrementeel extract inschakelen (preview). U kunt nu automatisch alleen de rijen ophalen die zijn gewijzigd in uw SQL Database-bronnen met behulp van gegevensstromen. Meer informatie | |
| Vier nieuwe connectors die beschikbaar zijn voor toewijzingsgegevensstromen (openbare preview) | Data Factory ondersteunt nu vier nieuwe connectors (openbare preview) voor toewijzingsgegevensstromen: Quickbase-connector, Smartsheet-connector, TeamDesk-connector en Zendesk-connector. Meer informatie | |
| Azure Cosmos DB (SQL API) voor toewijzingsgegevensstroom ondersteunt nu de inlinemodus | Azure Cosmos DB (SQL API) voor toewijzingsgegevensstroom kan nu inlinegegevenssets gebruiken. Meer informatie | |
| Gegevensverplaatsing | Get metadata-driven data ingestion pipelines on the Data Factory Copy Data tool within 10 minutes (GA) | U kunt binnen tien minuten grootschalige pijplijnen voor het kopiëren van gegevens bouwen met een benadering op basis van metagegevens in het hulpprogramma Copy Data. Meer informatie |
| Api-upgrade voor Data Factory Google AdWords-connector beschikbaar | De Data Factory Google AdWords-connector ondersteunt nu de nieuwe AdWords-API-versie. Er is geen actie vereist voor de nieuwe connectorgebruiker omdat deze standaard is ingeschakeld. Meer informatie | |
| Continue integratie en continue levering (CI/CD) | Azure DevOps-ondersteuning voor meerdere tenants | Configureer een opslagplaats met Behulp van Azure DevOps Git niet in dezelfde tenant als de Azure Data Factory。 Meer informatie |
| Regio-uitbreiding | Data Factory is nu beschikbaar in VS - west 3 en Jio India - west | Data Factory is nu beschikbaar in twee nieuwe regio's: VS - west 3 en Jio India - west. U kunt uw ETL-werkstroom in deze nieuwe regio's instellen als u deze regio's gebruikt om uw moderne datawarehouse op te slaan en te beheren. U kunt deze regio's ook gebruiken voor bedrijfscontinuïteit en herstel na noodgevallen als u een failover wilt uitvoeren vanuit een andere regio binnen de geografische regio. Meer informatie |
| Beveiliging | Verbinding maken met een Azure DevOps-account in een andere Entra ID-tenant | U kunt uw Data Factory-exemplaar verbinden met een Azure DevOps-account in een andere Azure AD-tenant voor broncodebeheer. Meer informatie |
Januari 2022
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Snel hergebruik is nu automatisch in alle Azure IRs die gebruikmaken van Time to Live (TTL) | U hoeft niet langer handmatig 'snel opnieuw gebruiken' op te geven. Data Factory-toewijzingsgegevensstromen kunnen nu binnen vijf seconden na het instellen van een TTL volgende gegevensstroomactiviteiten starten. Meer informatie |
| De aangepaste assertbeschrijving ophalen | In de transformatie Assert kunt u uw eigen dynamische beschrijvingsbericht definiëren. U kunt de nieuwe functie assertErrorMessage() gebruiken om het rij-per-rij-bericht op te halen en op te slaan in uw doelgegevens. Meer informatie | |
| Automatische schemadetectie in Parse-transformatie | Een nieuwe functie die is toegevoegd aan de Parse-transformatie, maakt het eenvoudig om het schema van een ingesloten complex veld in een tekenreekskolom automatisch te detecteren. Selecteer de knop Schema detecteren om uw doelschema automatisch in te stellen. Meer informatie | |
| Ondersteuning voor Dynamics 365-connector als zowel sink als bron | U kunt nu rechtstreeks verbinding maken met Dynamics 365 om uw Dynamics-gegevens op schaal te transformeren met behulp van de nieuwe connector voor toewijzingsgegevensstromen voor Dynamics 365. Meer informatie | |
| Always Encrypted SQL-verbindingen zijn nu beschikbaar in gegevensstromen | Always Encrypted kan nu brontransformaties in SQL Server, SQL Database, SQL Managed Instance en Azure Synapse gebruiken wanneer u gegevensstromen gebruikt. Meer informatie | |
| Gegevensverplaatsing | Data Factory Azure Databricks Delta Lake-connector ondersteunt nieuwe verificatietypen | Data Factory Databricks Delta Lake-connector ondersteunt nu twee verificatietypen: door het systeem toegewezen beheerde identiteitverificatie en door de gebruiker toegewezen beheerde identiteitverificatie. Meer informatie |
| Data Factory Copy-activiteit ondersteunt upsert in verschillende connectors | Data Factory-Copy-activiteit ondersteunt nu upsert terwijl er gegevens naar SQL Server, SQL Database, SQL Managed Instance en Azure Synapse worden gesinkt. Meer informatie |
December 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Dynamics-connector als systeemeigen bron en sink voor toewijzingsgegevensstromen | De Dynamics-connector wordt nu ondersteund als bron en sink voor toewijzingsgegevensstromen. Meer informatie |
| Systeemeigen wijzigingsgegevens vastleggen (CDC) wordt nu systeemeigen ondersteund | CDC wordt nu systeemeigen ondersteund in Data Factory voor Azure Cosmos DB, Blob Storage, Data Lake Storage Gen1, Data Lake Storage Gen2 en CDM. Meer informatie | |
| Openbare preview van Flowlets | Met de openbare preview van flowlets kunnen ontwikkelaars van gegevensstromen herbruikbare onderdelen bouwen om eenvoudig composeerbare logica voor gegevenstransformatie te bouwen. Meer informatie | |
| Openbare preview van kaartgegevens | Met de preview-versie van Kaartgegevens kunnen zakelijke gebruikers kolomtoewijzingen en transformaties definiëren om Azure Synapse Lake-databases te laden. Meer informatie | |
| Meerdere uitvoerbestemmingen uit Power Query | U kunt nu meerdere uitvoerbestemmingen toewijzen vanuit Power Query in Data Factory voor flexibele ETL-patronen voor burgergegevensintegrators. Meer informatie | |
| Ondersteuning voor transformatie van externe oproepen | Breid de functionaliteit van toewijzingsgegevensstromen uit met behulp van de transformatie externe aanroep. U kunt nu uw eigen aangepaste code toevoegen als een REST-eindpunt of een gecureerde servicerij van derden per rij aanroepen. Meer informatie | |
| Snel hergebruik door Azure Synapse-toewijzingsgegevensstromen inschakelen met TTL-ondersteuning | Azure Synapse-toewijzingsgegevensstromen ondersteunen nu snel hergebruik door een TTL in te stellen in de Azure IR. Met behulp van een instelling kunnen uw volgende gegevensstroomactiviteiten binnen vijf seconden worden uitgevoerd. Meer informatie | |
| Transformatie bevestigen | Voeg eenvoudig gegevenskwaliteit, validatie van gegevensdomeinen en metagegevenscontroles toe aan uw Data Factory-pijplijnen met behulp van de assert-transformatie in toewijzingsgegevensstromen. Meer informatie | |
| IntelliSense-ondersteuning in de opbouwfunctie voor expressies voor productievere pijplijnen | Met intelliSense-ondersteuning voor opbouwfunctie voor expressies en dynamische inhoud maken ontwikkelaars van Data Factory en Azure Synapse-pijplijnen productiever terwijl ze complexe expressies schrijven in hun gegevenspijplijnen. Meer informatie |
November 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Continue integratie en continue levering (CI/CD) | Verbeteringen in GitHub-integratie | Verbeteringen in data factory- en GitHub-integratie verwijderen limieten voor 1000 Data Factory-resources per resourcetype, zoals gegevenssets en pijplijnen. Voor grote data factory's helpt deze wijziging de impact van de Frequentielimiet van de GitHub-API te beperken. Meer informatie |
| Gegevensstroom | Een aangepaste foutcode en foutbericht instellen met de activiteit Mislukt | Met fail-activiteit kunnen ETL-ontwikkelaars het foutbericht en de aangepaste foutcode voor een Data Factory-pijplijn instellen. Meer informatie |
| Transformatie van externe aanroep | Met toewijzingsgegevensstromen voor externe aanroeptransformatie kunnen ETL-ontwikkelaars transformaties en gegevensverrijkingen gebruiken die worden geleverd door REST-eindpunten of API-services van derden. Meer informatie | |
| Snel hergebruik van Synapse | Wanneer u de gegevensstroom uitvoert in Synapse Analytics, gebruikt u de TTL-functie. De TTL-functie maakt gebruik van de functie snel opnieuw gebruiken, zodat sequentiële gegevensstromen binnen enkele seconden worden uitgevoerd. U kunt de TTL instellen wanneer u een Azure IR configureert. Meer informatie | |
| Gegevensverplaatsing | Copy-activiteit ondersteunt het lezen van gegevens van FTP of SFTP zonder segmentering | Bepaal automatisch de lengte van het bestand of de relevante offset die moet worden gelezen wanneer u gegevens kopieert van een FTP- of SFTP-server. Met deze mogelijkheid maakt Data Factory automatisch verbinding met de FTP- of SFTP-server om de bestandsgrootte te bepalen. Nadat de lengte is bepaald, verdeelt Data Factory het bestand in meerdere segmenten en leest ze parallel. Meer informatie |
| UTF-8 zonder bomondersteuning in Copy-activiteit | Copy-activiteit ondersteunt het schrijven van gegevens met het coderen van het type UTF-8 zonder bom voor JSON en tekstbestanden met scheidingstekens. | |
| Ondersteuning voor kolomscheidingstekens voor multicharacter | Copy-activiteit ondersteunt het gebruik van scheidingstekens voor kolommen met meerdere tekenreeksen voor tekstgegevenssets met scheidingstekens. | |
| Integration Runtime | Een proces overal in drie stappen uitvoeren met SQL Server Integration Services (SSIS) in Data Factory | Meer informatie over het gebruik van de beste mogelijkheden van Data Factory en SSIS in een pijplijn. Een voorbeeld van een SSIS-pakket met geparameteriseerde eigenschappen helpt u snel aan de slag te gaan. Met Data Factory Studio kan het SSIS-pakket eenvoudig worden gesleept en in een pijplijn worden geplaatst en worden gebruikt als onderdeel van een SSIS-pakketactiviteit uitvoeren. Met deze mogelijkheid kunt u de Data Factory-pijplijn uitvoeren met een SSIS-pakket op zelf-hostende IRs of SSIS IRs. Door runtimeparameterwaarden op te geven, kunt u de krachtige mogelijkheden van Data Factory en SSIS samen gebruiken. Dit artikel illustreert drie stappen voor het uitvoeren van elk proces, dat elk uitvoerbaar bestand kan zijn, zoals een toepassing, programma, hulpprogramma of batchbestand, waar dan ook. Meer informatie |
Oktober 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensstroom | Azure Data Explorer- en Amazon Web Services -connectors (AWS) S3 | Het Microsoft Data-Integratie-team heeft twee nieuwe connectors uitgebracht voor toewijzingsgegevensstromen. Als u Azure Synapse gebruikt, kunt u nu rechtstreeks verbinding maken met uw AWS S3-buckets voor gegevenstransformaties. In zowel Data Factory als Azure Synapse kunt u nu systeemeigen verbinding maken met uw Azure Data Explorer-clusters in toewijzingsgegevensstromen. Meer informatie |
| Power Query-activiteit verlaat preview voor algemene beschikbaarheid | De Data Factory Power Query-pijplijnactiviteit is nu algemeen beschikbaar. Deze nieuwe functie biedt uitgeschaalde gegevensvoorbereiding en gegevens wrangling voor burgerintegrators in de gebruikersinterface van de Data Factory-browser voor een geïntegreerde ervaring voor data engineers. De Power Query-functie voor het wrangling van gegevens in Data Factory biedt een krachtige, gebruiksvriendelijke pijplijnfunctie om uw meest complexe gegevensintegratie en ETL-patronen in één service op te lossen. Meer informatie | |
| Nieuwe Stringify-gegevenstransformatie in toewijzingsgegevensstromen | Met toewijzingsgegevensstromen wordt een nieuwe gegevenstransformatie met de naam Stringify toegevoegd, zodat complexe gegevenstypen, zoals structs en matrices, eenvoudig kunnen worden geconverteerd naar een tekenreeksformulier. Deze gegevenstypen kunnen vervolgens worden verzonden naar gestructureerde uitvoerbestemmingen. Meer informatie | |
| Integration Runtime | Express Virtual Network-injectie voor SSIS IR (openbare preview) | De SSIS IR ondersteunt nu express virtuele netwerkinjectie. Meer informatie: Overzicht van virtuele netwerkinjectie voor SSIS IR Standaard versus express virtuele netwerkinjectie voor SSIS IR Express Virtual Network-injectie voor SSIS IR |
| Beveiliging | Verbetering van azure Key Vault-integratie | Key Vault-integratie bevat nu vervolgkeuzelijsten, zodat gebruikers de geheime waarden in de gekoppelde service kunnen selecteren. Deze mogelijkheid verhoogt de productiviteit omdat gebruikers niet hoeven te typen in de geheimen, wat kan leiden tot menselijke fouten. |
| Ondersteuning voor door de gebruiker toegewezen beheerde identiteit in Data Factory | Referentieveiligheid is van cruciaal belang voor elke onderneming. Het Data Factory-team streeft ernaar om het data engineering-proces veilig en eenvoudig te maken voor data engineers. Door de gebruiker toegewezen beheerde identiteit (preview) wordt nu ondersteund in alle connectors en gekoppelde services die ondersteuning bieden voor verificatie op basis van Azure AD. Meer informatie |
September 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Continue integratie en continue levering | Uitgebreide CI/CD-mogelijkheden | U kunt nu een nieuwe Git-vertakking maken op basis van een andere vertakking in Data Factory. Meer informatie |
| Gegevensverplaatsing | Amazon Relational Database Service (RDS) voor Oracle-bronnen | De Amazon RDS voor Oracle-bronnenconnector is nu beschikbaar in zowel Data Factory als Azure Synapse. Meer informatie |
| Amazon RDS voor SQL Server-bronnen | De Amazon RDS voor de SQL Server-bronnenconnector is nu beschikbaar in zowel Data Factory als Azure Synapse. Meer informatie | |
| Ondersteuning voor parallelle kopie vanuit Azure Database for PostgreSQL | De Azure Database for PostgreSQL-connector ondersteunt nu parallelle kopieerbewerkingen. Meer informatie | |
| Gegevensstroom | Data Lake Storage Gen2 gebruiken om opdrachten vóór en na verwerking uit te voeren | Hadoop Distributed File System-opdrachten vooraf en naverwerking kunnen nu worden uitgevoerd met behulp van Data Lake Storage Gen2-sinks in gegevensstromen. Meer informatie |
| Eigenschappen van gegevensstromen bewerken voor bestaande exemplaren van de Azure IR | De Azure IR is bijgewerkt om het bewerken van gegevensstroomeigenschappen voor bestaande IR's mogelijk te maken. U kunt nu rekeneigenschappen voor gegevensstromen wijzigen zonder dat u een nieuwe Azure IR hoeft te maken. Meer informatie | |
| TTL-instelling voor Azure Synapse om de opstarttijd van pijplijnactiviteiten te verbeteren | Azure Synapse heeft TTL toegevoegd aan de Azure IR, zodat uw gegevensstroompijplijnactiviteiten binnen enkele seconden kunnen worden uitgevoerd, waardoor de runtime van uw gegevensstroompijplijnen aanzienlijk wordt geminimaliseerd. Meer informatie | |
| Integration Runtime | Algemene beschikbaarheid van door Data Factory beheerd virtueel netwerk | U kunt de Azure IR nu inrichten als onderdeel van een beheerd virtueel netwerk en privé-eindpunten gebruiken om veilig verbinding te maken met ondersteunde gegevensarchieven. Gegevensverkeer gaat via Azure Private Links, dat beveiligde connectiviteit biedt met de gegevensbron. Het voorkomt ook gegevensexfiltratie naar het openbare internet. Meer informatie |
| Orchestration | SLA operationeel maken en bieden voor gegevenspijplijnen | Met de nieuwe metrische gegevens voor time-pijplijnuitvoering, gecombineerd met Data Factory-waarschuwingen, kunnen ontwikkelaars van gegevenspijplijnen SLA's beter leveren aan hun klanten. Nu kunt u ons laten weten hoe lang een pijplijn moet worden uitgevoerd. We informeren u proactief wanneer de pijplijn langer wordt uitgevoerd dan verwacht. Meer informatie |
| Mislukte activiteit (openbare preview) | Met de nieuwe fail-activiteit kunt u om welke reden dan ook een fout in een pijplijn veroorzaken. U kunt bijvoorbeeld de mislukte activiteit gebruiken als een opzoekactiviteit geen overeenkomende gegevens retourneert of een aangepaste activiteit is voltooid met een interne fout. Meer informatie |
Augustus 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Continue integratie en continue levering | CI/CD-verbeteringen met GitHub-ondersteuning in Azure Government en Microsoft Azure beheerd door 21Vianet | We hebben ondersteuning toegevoegd voor GitHub in Azure for US Government en Azure beheerd door 21Vianet. Meer informatie |
| Gegevensverplaatsing | De Azure Cosmos DB-API voor MongoDB-connector ondersteunt versies 3.6 en 4.0 in Data Factory | De Data Factory Azure Cosmos DB-API voor MongoDB-connector ondersteunt nu serverversie 3.6 en 4.0. Meer informatie |
| Verbeteren met de COPY-instructie om gegevens te laden in Azure Synapse | De Data Factory Azure Synapse-connector ondersteunt nu gefaseerde kopieer- en kopieerbron met *.* als jokertekenbestandnaam voor de COPY-instructie. Meer informatie | |
| Gegevensstroom | REST-eindpunten zijn beschikbaar als bron en sink in de gegevensstroom | Gegevensstromen in Data Factory en Azure Synapse ondersteunen nu REST-eindpunten als bron en sink met volledige ondersteuning voor zowel JSON- als XML-nettoladingen. Meer informatie |
| Integration Runtime | Diagnostisch hulpprogramma is beschikbaar voor zelf-hostende IR | Een diagnostisch hulpprogramma voor zelf-hostende IR is ontworpen om een betere gebruikerservaring te bieden en gebruikers te helpen potentiële problemen te vinden. Het hulpprogramma voert een reeks testscenario's uit op de zelf-hostende IR-machine. Elk scenario heeft typische statuscontrolecases voor veelvoorkomende problemen. Meer informatie |
| Orchestration | Aangepaste gebeurtenistrigger met geavanceerde filteroptie GA | U kunt nu een trigger maken die reageert op een aangepast onderwerp dat is gepost in Azure Event Grid. U kunt ook geavanceerde filters gebruiken om gedetailleerde controle te krijgen over de gebeurtenissen waarop moet worden gereageerd. Meer informatie |
Juli 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensverplaatsing | Gegevensopnamepijplijnen ophalen op basis van metagegevens in het hulpprogramma Data Factory Copy Data binnen 10 minuten (openbare preview) | U kunt nu binnen tien minuten grootschalige pijplijnen voor het kopiëren van gegevens bouwen met behulp van metagegevens in het hulpprogramma Copy Data (openbare preview). Meer informatie |
| Gegevensstroom | Nieuwe kaartfuncties toegevoegd aan transformatiefuncties voor gegevensstromen | Met een nieuwe set transformatiefuncties voor gegevensstromen kunnen gegevenstechnici eenvoudig kaartgegevenstypen en complexe kaartstructuren genereren, lezen en bijwerken. Meer informatie |
| Integration Runtime | Er zijn vijf nieuwe regio's beschikbaar in het beheerde virtuele netwerk van Data Factory (openbare preview) | Vijf nieuwe regio's, China East2, China North2, US Government Arizona, US Government Texas en US Government Virginia, zijn beschikbaar in het door Data Factory beheerde virtuele netwerk (openbare preview). |
| Productiviteit van ontwikkelaars | Verbeteringen aan de startpagina van Data Factory | De startpagina van Data Factory is opnieuw ontworpen met betere contrast- en herstroommogelijkheden. Op de startpagina worden enkele secties geïntroduceerd om de productiviteit in uw gegevensintegratietraject te verbeteren. Meer informatie |
| Nieuwe landingspagina voor Data Factory Studio | De landingspagina voor het deelvenster Data Factory in Azure Portal. Meer informatie |
Juni 2021
| Servicecategorie | Serviceverbeteringen | DETAILS |
| Gegevensverplaatsing | Nieuwe gebruikerservaring met het hulpprogramma Data Factory Copy Data | Het opnieuw ontworpen hulpprogramma Copy Data is nu beschikbaar met een verbeterde ervaring voor gegevensopname. Meer informatie |
| MongoDB en MongoDB Atlas worden ondersteund als bron en sink | Deze verbetering ondersteunt het kopiëren van gegevens tussen elke ondersteunde gegevensopslag en MongoDB- of MongoDB Atlas-database. Meer informatie | |
| Always Encrypted wordt ondersteund voor SQL Database-, SQL Managed Instance- en SQL Server-connectors als bron en sink | Always Encrypted is beschikbaar in Data Factory voor SQL Database-, SQL Managed Instance- en SQL Server-connectors voor de Copy-activiteit. Meer informatie | |
| Het instellen van aangepaste metagegevens wordt ondersteund in Copy-activiteit bij het sinken naar Data Lake Storage Gen2 of Blob Storage | Wanneer u naar Data Lake Storage Gen2 of Blob Storage schrijft, ondersteunt de Copy-activiteit het instellen van aangepaste metagegevens of opslag van de laatst gewijzigde gegevens van het bronbestand als metagegevens. Meer informatie | |
| Gegevensstroom | SQL Server wordt nu ondersteund als bron en sink in gegevensstromen | SQL Server wordt nu ondersteund als bron en sink in gegevensstromen. Volg de koppeling voor instructies over het configureren van uw netwerken met behulp van de functie beheerd virtueel netwerk van Azure IR om te communiceren met uw on-premises SQL Server- en cloud-VM-exemplaren. Meer informatie |
| Snel hergebruik van gegevensstroomcluster is nu standaard ingeschakeld voor alle nieuwe Azure IRs | De populaire functie voor snel opstarten van gegevensstromen is nu algemeen beschikbaar voor Data Factory. Voor alle nieuwe Azure-IR's is nu standaard snel hergebruik ingeschakeld. Meer informatie | |
| Power Query-activiteit (openbare preview) | U kunt nu complexe veldtoewijzingen bouwen aan uw Power Query-sink met behulp van Data Factory-gegevens wrangling. De sink is nu geconfigureerd in de pijplijn in de Power Query-activiteit (openbare preview) voor deze update. Meer informatie | |
| Bijgewerkte gebruikersinterface voor bewaking van gegevensstromen in Data Factory | Data Factory heeft een nieuwe update voor de bewakingsgebruikersinterface om het gemakkelijker te maken om de ETL-taakuitvoeringen van uw gegevensstroom weer te geven en snel gebieden te identificeren voor het afstemmen van prestaties. Meer informatie | |
| SQL Server Integration Services | Sql-instructies of -scripts overal in drie stappen uitvoeren met SSIS in Data Factory | Dit bericht bevat drie stappen voor het uitvoeren van SQL-instructies of -scripts overal met SSIS in Data Factory.
|