Del via

Ta med din egen Azure Data Lake Storage Gen2

  • Artikkel

Power Automate Process Mining gir deg muligheten til å lagre og lese hendelsesloggdata direkte fra Azure Data Lake Storage Gen2. Denne funksjonen forenkler utpakkings-, transformasjons- og lastadministrasjon (ETL) ved å koble direkte til lagringskontoen.

Denne funksjonen støtter for øyeblikket inntak av følgende:

  • CSV
    • Én CSV-fil.
    • Mappe med flere CSV-filer som har samme struktur. Alle filer er hentet inn.
  • Parquet
    • Én Parquet-fil.
    • Mappe med flere parkettfiler som har samme struktur. Alle filer er hentet inn.
  • Delta Parquet
    • Mappe som inneholder en Delta Parquet-struktur.

Forutsetning

  • Data Lake Storage-kontoen må være Gen2. Du kan sjekke denne ut fra Azure Portal. Azure Data Lake Gen1-lagringskontoer støttes ikke.

  • Azure Data Lake Storage-kontoen må ha hierarkisk navneområde aktivert.

  • Eier-rollen må tilskrives brukeren som utfører det første beholderoppsettet for miljøet for følgende brukere i det samme miljøet. Disse brukerne kobler til samme beholder og må ha disse tilordningene:

    • Rollen Storage Blob-dataleser eller Storage Blob-databidragsyter må være tilordnet
    • Rollen som leser i Azure Resource Manager må være tilordnet, som et minimum.

  • Regel for Ressursdeling (CORS) for lagringskontoen må opprettes for deling med Power Automate Process Mining.

    • Tillatte opprinnelser må settes til https://make.powerautomate.com og https://make.powerapps.com.

    • Tillatte metoder må inneholde: get, options, put, post.

    • Tillatte overskrifter må være så fleksible som mulig. Vi anbefaler at du definerer dem som *.

    • Eksponerte overskrifter må være så fleksible som mulig. Vi anbefaler at du definerer dem som *.

    • Maksimal alder bør være så fleksibel som mulig. Det anbefales å bruke 86400.

      Skjermbilde av eksemplet på skjerm for CORS-innstillinger.

  • CSV-data i Data Lake Storage må oppfylle følgende krav til CSV-filformat:

    • Kompresjonstype: Ingen
    • Kolonneskilletegn: Komma (,)
    • Radskilletegn: Standard og koding. For eksempel, Standard (\r,\n, eller \r\n)

    Skjermbilde av skjermen Filformatinnstillinger.

  • Alle data må være i det endelige loggformatet for hendelser og oppfylle kravene som er angitt i datakravene. Data må være klar til å tilordnes til gruveskjemaet for prosessen. Ingen datatransformasjon er tilgjengelig etter inntak.

  • Størrelsen (bredden) på overskriftsraden er for øyeblikket begrenset til 1 MB.

Viktig

Kontroller at tidsangivelsen som representeres i CSV-filen, følger ISO 8601-standardformatet (for eksempel YYYY-MM-DD HH:MM:SS.sss eller YYYY-MM-DDTHH:MM:SS.sss).

Koble til Azure Data Lake Storage

  1. Velg Prosessutvinning>Start her i navigasjonsruten til venstre.

  2. Angi et navn for prosessen i feltet Prosessnavn.

  3. Under Datakilde-overskriften velger du Importer data>Azure Data Lake>Fortsett. Skjermbilde av trinnet Opprett prosess.

  4. Velg Abonnements-ID, Ressursgruppe, Lagringskonto og Beholder på rullegardinmenyene på skjermen Tilkoblingsoppsett.

  5. Velg filen eller mappen som inneholder hendelsesloggdataene.

    Du kan velge én enkelt fil eller en mappe med flere filer. Alle filer må ha samme overskrifter og format.

  6. Velg Neste.

  7. På skjermen Tilordne dataene dine tilordner du data til det nødvendige skjemaet.

    Skjermbilde av skjermen Tilordne dataene dine.

  8. Fullfør tilkoblingen ved å velge Lagre og analyser.

Definer innstillinger for trinnvis dataoppdatering

Du kan oppdatere en prosess innhentet fra Azure Data Lake på en tidsplan, enten ved hjelp av en fullstendig eller trinnvis oppdatering. Selv om det ikke finnes oppbevaringspolicyer, kan du trinnvis innta data ved å bruke en av følgende metoder:

Hvis du valgte en enkeltfil i forrige del, legger du til flere data i den valgte filen.

Hvis du valgte en mappe i forrige del, legger du til trinnvise filer i den valgte mappen.

Viktig

Når du legger til trinnvise filer i en valgt mappe eller undermappe, må du passe på at du angir trinnvis rekkefølge ved å gi filer navn med datoer som ÅÅÅMMDD.csv eller ÅÅÅÅMMDDHHMMSS.csv.

Slik oppdaterer du en prosess:

  1. Gå til Detaljer-siden for prosessen.

  2. Velg Oppdateringsinnstillinger.

  3. På skjermen Planlegg oppdatering fullfører du følgende trinn:

    1. Slå på vekslebryteren Hold data oppdatert.
    2. I rullegardinlisten Oppdater data hver velger du hyppigheten for oppdateringen.
    3. I feltene og velger du dato og klokkeslett for oppdateringen.
    4. Aktiver veksleknappen Trinnvis oppdatering.