Sdílet prostřednictvím

Formát Iceberg ve službě Azure Data Factory a Azure Synapse Analytics

  • Článek

PLATÍ PRO: Azure Data Factory Azure Synapse Analytics

Tip

Vyzkoušejte si službu Data Factory v Microsoft Fabric, řešení pro analýzy typu all-in-one pro podniky. Microsoft Fabric zahrnuje všechno od přesunu dat až po datové vědy, analýzy v reálném čase, business intelligence a vytváření sestav. Přečtěte si, jak začít používat novou zkušební verzi zdarma.

Pokud chcete data zapsat do formátu Iceberg, postupujte podle tohoto článku.

Pro následující konektory se podporuje formát Iceberg:

Datovou sadu Iceberg můžete použít v aktivita Copy.

Vlastnosti datové sady

Úplný seznam oddílů a vlastností dostupných pro definování datových sad najdete v článku Datové sady . Tato část obsahuje seznam vlastností podporovaných datovou sadou formátu Iceberg.

Vlastnost Popis Povinní účastníci
type Vlastnost typu datové sady musí být nastavená na Iceberg. Ano
location Nastavení umístění souborů Každý konektor založený na souborech má svůj vlastní typ umístění a podporované vlastnosti v části location. Ano

Níže je příklad datové sady Iceberg v Azure Data Lake Storage Gen2:

{
    "name": "IcebergDataset",
    "properties": {
        "type": "Iceberg",
        "linkedServiceName": {
            "referenceName": "<Azure Data Lake Storage Gen2 linked service name>",
            "type": "LinkedServiceReference"
        },
        "schema": [ < physical schema, optional, auto retrieved during authoring >
        ],
        "typeProperties": {
            "location": {
                "type": "AzureBlobFSLocation",
                "fileSystem": "filesystemname",
                "folderPath": "folder/subfolder",
            }
        }
    }
}

Vlastnosti aktivity kopírování

Úplný seznam oddílů a vlastností dostupných pro definování aktivit najdete v článku Pipelines . Tato část obsahuje seznam vlastností podporovaných jímkou Iceberg.

Ledovec jako jímka

Následující vlastnosti jsou podporovány v části aktivity kopírování *jímka*.

Vlastnost Popis Povinní účastníci
type Vlastnost typu zdroje aktivity kopírování musí být nastavena na IcebergSink. Ano
formatSettings Skupina vlastností. Níže najdete tabulku nastavení zápisu do Icebergu. No
storeSettings Skupina vlastností pro zápis dat do úložiště dat. Každý konektor založený na souborech má vlastní podporovaná nastavení zápisu v části storeSettings. No

Podporovaná nastavení zápisu do Icebergu v části formatSettings:

Vlastnost Popis Povinní účastníci
type Typ formatSettings musí být nastaven na IcebergWriteSettings. Ano

Tady jsou některé běžné spojnice a formáty související s formátem textu s oddělovači:

Související obsah