Dela via

Iceberg-format i Azure Data Factory och Azure Synapse Analytics

  • Artikel

GÄLLER FÖR: Azure Data Factory Azure Synapse Analytics

Dricks

Prova Data Factory i Microsoft Fabric, en allt-i-ett-analyslösning för företag. Microsoft Fabric omfattar allt från dataflytt till datavetenskap, realtidsanalys, business intelligence och rapportering. Lär dig hur du startar en ny utvärderingsversion kostnadsfritt!

Följ den här artikeln när du vill skriva data i Iceberg-format.

Iceberg-format stöds för följande anslutningsappar:

Du kan använda Iceberg-datauppsättningen i aktiviteten Kopiera.

Egenskaper för datauppsättning

En fullständig lista över avsnitt och egenskaper som är tillgängliga för att definiera datauppsättningar finns i artikeln Datauppsättningar . Det här avsnittet innehåller en lista över egenskaper som stöds av datauppsättningen i Iceberg-format.

Property Beskrivning Obligatoriskt
type Datamängdens typegenskap måste anges till Isberg. Ja
plats Platsinställningar för filen eller filerna. Varje filbaserad anslutningsapp har en egen platstyp och egenskaper som stöds under location. Ja

Nedan visas ett exempel på Iceberg-datauppsättning på Azure Data Lake Storage Gen2:

{
    "name": "IcebergDataset",
    "properties": {
        "type": "Iceberg",
        "linkedServiceName": {
            "referenceName": "<Azure Data Lake Storage Gen2 linked service name>",
            "type": "LinkedServiceReference"
        },
        "schema": [ < physical schema, optional, auto retrieved during authoring >
        ],
        "typeProperties": {
            "location": {
                "type": "AzureBlobFSLocation",
                "fileSystem": "filesystemname",
                "folderPath": "folder/subfolder",
            }
        }
    }
}

Kopiera egenskaper för aktivitet

En fullständig lista över avsnitt och egenskaper som är tillgängliga för att definiera aktiviteter finns i artikeln Pipelines . Det här avsnittet innehåller en lista över egenskaper som stöds av isbergsmottagaren.

Isberg som handfat

Följande egenskaper stöds i avsnittet kopieringsaktivitet *mottagare* .

Property Beskrivning Obligatoriskt
type Typegenskapen för kopieringsaktivitetskällan måste anges till IcebergSink. Ja
formatInställningar En grupp med egenskaper. Se tabellen för isbergsskrivningsinställningar nedan. Nej
storeSettings En grupp med egenskaper för hur du skriver data till ett datalager. Varje filbaserad anslutningsapp har egna skrivinställningar som stöds under storeSettings. Nej

Isbergsskrivningsinställningar som stöds under formatSettings:

Property Beskrivning Obligatoriskt
type Typen av formatInställningar måste anges till IcebergWriteSettings. Ja

Här följer några vanliga anslutningsappar och format som är relaterade till det avgränsade textformatet:

Relaterat innehåll