Avro-format i Data Factory i Microsoft Fabric
Denne artikkelen beskriver hvordan du konfigurerer Avro-format i datasamlebåndet til Data Factory i Microsoft Fabric.
Støttede funksjoner
Avro-format støttes for følgende aktiviteter og koblinger som kilde og mål.
Kategori | Kobling/aktivitet |
---|---|
Støttet kobling | Amazon S3 |
Amazon S3-kompatibel | |
Azure Blob-lagring | |
Azure Data Lake Storage Gen1 | |
Azure Data Lake Storage Gen2 | |
Azure Files | |
Filsystem | |
FTP | |
Google Cloud Storage | |
HTTP | |
Lakehouse Files | |
Oracle Cloud Storage | |
SFTP | |
Støttet aktivitet | Kopier aktivitet (kilde/mål) |
Oppslagsaktivitet | |
GetMetadata-aktivitet | |
Slett aktivitet |
Avro-format i kopieringsaktivitet
Hvis du vil konfigurere Avro-format, velger du tilkoblingen i kilden eller målet for datasamlebåndkopiaktivitet, og deretter velger du Avro i rullegardinlisten i Filformat. Velg Innstillinger for videre konfigurasjon av dette formatet.
Avro-format som kilde
Når du har valgt Innstillinger i Filformat-delen, vises følgende egenskaper i dialogboksen innstillinger for popup-filformat.
Komprimeringstype: Velg komprimeringskodek som brukes til å lese Avro-filer i rullegardinlisten. Du kan velge mellom Ingen eller deflate. Du kan også velge Legg til dynamisk innhold for å angi typen i uttrykksverktøyet.
Komprimeringsnivå: Angi komprimeringsforholdet. Velg mellom 1 og 7. Du kan også velge Legg til dynamisk innhold for å angi nivået i uttrykksverktøyet.
Avro-format som mål
Når du har valgt Innstillinger, vises følgende egenskaper i dialogboksen innstillinger for popup-filformat.
Komprimeringstype: Velg komprimeringskodek som brukes til å skrive Avro-filer i rullegardinlisten. Du kan velge mellom Ingen eller deflate. Du kan også velge Legg til dynamisk innhold for å angi typen i uttrykksverktøyet.
Komprimeringsnivå: Angi komprimeringsforholdet. Velg mellom 1 og 7. Du kan også velge Legg til dynamisk innhold for å angi nivået i uttrykksverktøyet.
Under Avanserte innstillinger i Mål-fanen vises følgende Avro-formatrelaterte egenskaper.
- Maksimalt antall rader per fil: Når du skriver data inn i en mappe, kan du velge å skrive til flere filer og angi maksimalt antall rader per fil.
- Filnavnprefiks: Gjelder når maksimalt antall rader per fil er konfigurert. Angi filnavnprefikset når du skriver data til flere filer, resulterte i dette mønsteret:
<fileNamePrefix>_00000.<fileExtension>
. Hvis ikke angitt, genereres filnavnprefikset automatisk. Denne egenskapen gjelder ikke når kilden er et filbasert lager eller et partisjonsalternativ aktivert datalager.
Tabellsammendrag
Avro som kilde
Følgende egenskaper støttes i delen kilde for kopieringsaktivitet når du bruker Avro-formatet.
Name | Beskrivelse | Verdi | Kreves | Avro-skriptegenskap |
---|---|---|---|---|
Filformat | Filformatet du vil bruke. | Avro | Ja | type (under datasetSettings ):Avro |
Komprimeringstype | Komprimeringskodek som brukes til å lese Avro-filer. | None Deflate |
No | avroCompressionCodec: Deflate |
Komprimeringsnivå | Komprimeringsforholdet. | 1 til 7 | No | avroCompressionLevel: 1 til 7 |
Avro som mål
Følgende egenskaper støttes i måldelen for kopieringsaktivitet når du bruker Avro-formatet.
Name | Beskrivelse | Verdi | Kreves | Avro-skriptegenskap |
---|---|---|---|---|
Filformat | Filformatet du vil bruke. | Avro | Ja | type (under datasetSettings ):Avro |
Komprimeringstype | Komprimeringskodecen som brukes til å skrive Avro-filer. | None Deflate |
No | avroCompressionCodec: Deflate |
Komprimeringsnivå | Komprimeringsforholdet. | 1 til 7 | No | avroCompressionLevel: 1 til 7 |
Maksimalt antall rader per fil | Når du skriver data inn i en mappe, kan du velge å skrive til flere filer og angi maksimalt antall rader per fil. | < maksimalt antall rader per fil > | No | maxRowsPerFile |
Filnavnprefiks | Gjelder når maksimalt antall rader per fil er konfigurert. Angi filnavnprefikset når du skriver data til flere filer, resulterte i dette mønsteret: <fileNamePrefix>_00000.<fileExtension> . Hvis ikke angitt, genereres filnavnprefikset automatisk. Denne egenskapen gjelder ikke når kilden er et filbasert lager eller et partisjonsalternativ aktivert datalager. |
< filnavnprefikset > | No | fileNamePrefix |