Formát Avro ve službě Data Factory v Microsoft Fabric
Tento článek popisuje, jak nakonfigurovat formát Avro v datovém kanálu služby Data Factory v Microsoft Fabric.
Podporované funkce
Formát Avro je podporovaný pro následující aktivity a konektory jako zdroj a cíl.
| Kategorie | Konektor nebo aktivita |
|---|---|
| Podporovaný konektor | Amazon S3 |
| Kompatibilní s Amazon S3 | |
| Azure Blob Storage | |
| Azure Data Lake Storage Gen1 | |
| Azure Data Lake Storage Gen2 | |
| Azure Files | |
| Systém souborů | |
| FTP | |
| Cloudové úložiště Googlu | |
| HTTP | |
| Soubory Lakehouse | |
| Oracle Cloud Storage | |
| SFTP | |
| Podporovaná aktivita | aktivita Copy (zdroj/cíl) |
| Aktivita Lookup | |
| Aktivita GetMetadata | |
| Aktivita odstranění |
Formát Avro v aktivitě kopírování
Pokud chcete nakonfigurovat formát Avro, zvolte připojení ve zdroji nebo cíli aktivity kopírování datového kanálu a pak v rozevíracím seznamu formát souboru vyberte Avro. Vyberte Nastavení pro další konfiguraci tohoto formátu.
Formát Avro jako zdroj
Po výběru Nastavení v části Formát souboru se v automaticky otevíraných nastaveních formátu souboru zobrazí následující vlastnosti.
Typ komprese: Zvolte kodek komprese použitý ke čtení souborů Avro v rozevíracím seznamu. Můžete si vybrat možnost None (Žádné) nebo deflate (Deflate). Můžete také zvolit Přidat dynamický obsah a určit typ v tvůrci výrazů.
Úroveň komprese: Zadejte poměr komprese. Vyberte z 1 do 7. Můžete také zvolit Přidat dynamický obsah a určit úroveň v tvůrci výrazů.
Formát Avro jako cíl
Po výběru možnosti Nastavení se v automaticky otevíraných nastaveních formátu souboru zobrazí následující vlastnosti.
Typ komprese: Zvolte kodek komprese použitý k zápisu souborů Avro v rozevíracím seznamu. Můžete si vybrat možnost None (Žádné) nebo deflate (Deflate). Můžete také zvolit Přidat dynamický obsah a určit typ v tvůrci výrazů.
Úroveň komprese: Zadejte poměr komprese. Vyberte z 1 do 7. Můžete také zvolit Přidat dynamický obsah a určit úroveň v tvůrci výrazů.
V části Upřesnit nastavení na kartě Cíl se zobrazí následující vlastnosti související s formátem Avro.
- Maximální počet řádků na soubor: Při zápisu dat do složky se můžete rozhodnout zapisovat do více souborů a zadat maximální počet řádků na soubor.
- Předpona názvu souboru: Platí při konfiguraci maximálního počtu řádků na soubor . Při zápisu dat do více souborů zadejte předponu názvu souboru, výsledkem je tento vzor:
<fileNamePrefix>_00000.<fileExtension>. Pokud není zadána, automaticky se vygeneruje předpona názvu souboru. Tato vlastnost se nevztahuje, pokud zdrojem je úložiště založené na souborech nebo možnost oddílu s povoleným úložištěm dat.
Souhrn tabulky
Avro jako zdroj
Následující vlastnosti jsou podporovány v části Zdroj aktivity kopírování při použití formátu Avro.
| Název | Popis | Hodnota | Požaduje se | Avro script – vlastnost |
|---|---|---|---|---|
| Formát souboru | Formát souboru, který chcete použít. | Avro | Ano | typ (v části datasetSettings):Avro |
| Typ komprese | Komprimační kodek používaný ke čtení souborů Avro. | Nic vyfouknout |
No | avroCompressionCodec: vyfouknout |
| Úroveň komprese | Poměr komprese. | 1 až 7 | No | avroCompressionLevel: 1 až 7 |
Avro jako cíl
Následující vlastnosti jsou podporovány v části Cíl aktivity kopírování při použití formátu Avro.
| Název | Popis | Hodnota | Požaduje se | Avro script – vlastnost |
|---|---|---|---|---|
| Formát souboru | Formát souboru, který chcete použít. | Avro | Ano | typ (v části datasetSettings):Avro |
| Typ komprese | Kodek komprese používaný k zápisu souborů Avro. | Nic vyfouknout |
No | avroCompressionCodec: vyfouknout |
| Úroveň komprese | Poměr komprese. | 1 až 7 | No | avroCompressionLevel: 1 až 7 |
| Maximální počet řádků na soubor | Při zápisu dat do složky se můžete rozhodnout zapisovat do více souborů a zadat maximální počet řádků na soubor. | < maximální počet řádků na soubor > | No | maxRowsPerFile |
| Předpona názvu souboru | Platí pro konfiguraci maximálního počtu řádků na soubor . Při zápisu dat do více souborů zadejte předponu názvu souboru, výsledkem je tento vzor: <fileNamePrefix>_00000.<fileExtension>. Pokud není zadána, automaticky se vygeneruje předpona názvu souboru. Tato vlastnost se nevztahuje, pokud zdrojem je úložiště založené na souborech nebo možnost oddílu s povoleným úložištěm dat. |
< předpona názvu souboru > | No | fileNamePrefix |