Delen via

az synapse spark pool

  • Referentie

Spark-pools beheren.

Opdracht

Name Description Type Status
az synapse spark pool create

Maak een Spark-pool.

 Basis GA
az synapse spark pool delete

Een Spark-pool verwijderen.

 Basis GA
az synapse spark pool list

Alle Spark-pools weergeven.

 Basis GA
az synapse spark pool show

Haal een Spark-pool op.

 Basis GA
az synapse spark pool update

Werk de Spark-pool bij.

 Basis GA
az synapse spark pool wait

Plaats de CLI in een wachtstatus totdat aan een voorwaarde van een Spark-pool wordt voldaan.

 Basis GA

az synapse spark pool create

Bewerken

Maak een Spark-pool.

az synapse spark pool create --name
                             --node-count
                             --node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
                             --resource-group
                             --spark-version
                             --workspace-name
                             [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--no-wait]
                             [--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
                             [--spark-config-file-path]
                             [--spark-events-folder]
                             [--spark-log-folder]
                             [--tags]

Voorbeelden

Maak een Spark-pool.

az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'

Vereiste parameters

--name -n

De naam van de Spark-pool.

--node-count

Het aantal knooppunten.

--node-size

Het rekenvermogen dat elk knooppunt in de big data-pool heeft.

Geaccepteerde waarden: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--resource-group -g

De naam van de resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.

--spark-version

De ondersteunde Spark-versie is nu 2.4.

--workspace-name

De naam van de werkruimte.

Optionele parameters

--delay

De vertragingstijd waarvan de eenheid minuut is.

--enable-auto-pause

De vlag voor het inschakelen van automatisch onderbreken.

Geaccepteerde waarden: false, true
--enable-auto-scale

De vlag voor het inschakelen van automatische schaalaanpassing.

Geaccepteerde waarden: false, true
--enable-dynamic-exec

Geeft aan of dynamische uitvoerdertoewijzing is ingeschakeld of niet.

Geaccepteerde waarden: false, true
--max-executors

Het maximum aantal uitvoerders dat is toegewezen.

--max-node-count

Het maximumaantal knooppunten.

--min-executors

Het minimale aantal uitvoerders dat is toegewezen.

--min-node-count

Het minimumaantal knooppunten.

--no-wait

Wacht niet totdat de langdurige bewerking is voltooid.

Default value: False
--node-size-family

Het soort knooppunten dat de big data-pool biedt.

Geaccepteerde waarden: HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None
Default value: MemoryOptimized
--spark-config-file-path

Absoluut pad van het configuratiebestand met eigenschappen van Spark-pool.

--spark-events-folder

De map Met Spark-gebeurtenissen.

Default value: /events
--spark-log-folder

De standaardmap van het Spark-logboek.

Default value: /logs
--tags

Door spaties gescheiden tags: key[=value] [key[=value] ...]. Gebruik '' om bestaande tags te wissen.

Globale parameters
--debug

Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.

--help -h

Dit Help-bericht weergeven en afsluiten.

--only-show-errors

Alleen fouten weergeven, waarschuwingen onderdrukken.

--output -o

Uitvoerindeling.

Geaccepteerde waarden: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--verbose

Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.

az synapse spark pool delete

Bewerken

Een Spark-pool verwijderen.

az synapse spark pool delete [--ids]
                             [--name]
                             [--no-wait]
                             [--resource-group]
                             [--subscription]
                             [--workspace-name]
                             [--yes]

Voorbeelden

Een Spark-pool verwijderen.

az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg

Optionele parameters

--ids

Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. Geef de argumenten --id's of andere resource-id's op.

--name -n

De naam van de Spark-pool.

--no-wait

Wacht niet totdat de langdurige bewerking is voltooid.

Default value: False
--resource-group -g

De naam van de resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--workspace-name

De naam van de werkruimte.

--yes -y

Niet vragen om bevestiging.

Default value: False
Globale parameters
--debug

Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.

--help -h

Dit Help-bericht weergeven en afsluiten.

--only-show-errors

Alleen fouten weergeven, waarschuwingen onderdrukken.

--output -o

Uitvoerindeling.

Geaccepteerde waarden: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--verbose

Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.

az synapse spark pool list

Bewerken

Alle Spark-pools weergeven.

az synapse spark pool list --resource-group
                           --workspace-name

Voorbeelden

Alle Spark-pools weergeven.

az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg

Vereiste parameters

--resource-group -g

De naam van de resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.

--workspace-name

De naam van de werkruimte.

Globale parameters
--debug

Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.

--help -h

Dit Help-bericht weergeven en afsluiten.

--only-show-errors

Alleen fouten weergeven, waarschuwingen onderdrukken.

--output -o

Uitvoerindeling.

Geaccepteerde waarden: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--verbose

Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.

az synapse spark pool show

Bewerken

Haal een Spark-pool op.

az synapse spark pool show [--ids]
                           [--name]
                           [--resource-group]
                           [--subscription]
                           [--workspace-name]

Voorbeelden

Haal een Spark-pool op.

az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg

Optionele parameters

--ids

Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. Geef de argumenten --id's of andere resource-id's op.

--name -n

De naam van de Spark-pool.

--resource-group -g

De naam van de resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--workspace-name

De naam van de werkruimte.

Globale parameters
--debug

Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.

--help -h

Dit Help-bericht weergeven en afsluiten.

--only-show-errors

Alleen fouten weergeven, waarschuwingen onderdrukken.

--output -o

Uitvoerindeling.

Geaccepteerde waarden: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--verbose

Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.

az synapse spark pool update

Bewerken

Werk de Spark-pool bij.

az synapse spark pool update [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--force {false, true}]
                             [--ids]
                             [--library-requirements]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--name]
                             [--no-wait]
                             [--node-count]
                             [--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
                             [--package]
                             [--package-action {Add, Remove}]
                             [--resource-group]
                             [--spark-config-file-path]
                             [--subscription]
                             [--tags]
                             [--workspace-name]

Voorbeelden

Werk de tags van de Spark-pool bij.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1

Werk de configuratie van de automatische schaal van de Spark-pool bij.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100

Werk de aangepaste bibliotheken van de Spark-pool bij.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar

Werk het configuratiebestand van de Spark-pool bij.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'

Werk de dynamische toewijzingsconfiguratie van de Spark-pool bij.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10

Optionele parameters

--delay

De vertragingstijd waarvan de eenheid minuut is.

--enable-auto-pause

De vlag voor het inschakelen van automatisch onderbreken.

Geaccepteerde waarden: false, true
--enable-auto-scale

De vlag voor het inschakelen van automatische schaalaanpassing.

Geaccepteerde waarden: false, true
--enable-dynamic-exec

Geeft aan of dynamische uitvoerdertoewijzing is ingeschakeld of niet.

Geaccepteerde waarden: false, true
--force

De vlag van de geforceerde operatie.

Geaccepteerde waarden: false, true
Default value: False
--ids

Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. Geef de argumenten --id's of andere resource-id's op.

--library-requirements

Het bestand met bibliotheekvereisten.

--max-executors

Het maximum aantal uitvoerders dat is toegewezen.

--max-node-count

Het maximumaantal knooppunten.

--min-executors

Het minimale aantal uitvoerders dat is toegewezen.

--min-node-count

Het minimumaantal knooppunten.

--name -n

De naam van de Spark-pool.

--no-wait

Wacht niet totdat de langdurige bewerking is voltooid.

Default value: False
--node-count

Het aantal knooppunten.

--node-size

Het rekenvermogen dat elk knooppunt in de big data-pool heeft.

Geaccepteerde waarden: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--package

Lijst met naam van werkruimtepakketten.

--package-action

Pakketactie moet worden opgegeven wanneer u een werkruimtepakket toevoegt aan of verwijdert uit een Apache Spark-pool.

Geaccepteerde waarden: Add, Remove
--resource-group -g

De naam van de resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.

--spark-config-file-path

Absoluut pad van het configuratiebestand met eigenschappen van Spark-pool.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--tags

Door spaties gescheiden tags: key[=value] [key[=value] ...]. Gebruik '' om bestaande tags te wissen.

--workspace-name

De naam van de werkruimte.

Globale parameters
--debug

Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.

--help -h

Dit Help-bericht weergeven en afsluiten.

--only-show-errors

Alleen fouten weergeven, waarschuwingen onderdrukken.

--output -o

Uitvoerindeling.

Geaccepteerde waarden: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--verbose

Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.

az synapse spark pool wait

Bewerken

Plaats de CLI in een wachtstatus totdat aan een voorwaarde van een Spark-pool wordt voldaan.

az synapse spark pool wait --big-data-pool-name
                           [--created]
                           [--custom]
                           [--deleted]
                           [--exists]
                           [--ids]
                           [--interval]
                           [--resource-group]
                           [--subscription]
                           [--timeout]
                           [--updated]
                           [--workspace-name]

Vereiste parameters

--big-data-pool-name

Naam van big data-pool.

Optionele parameters

--created

Wacht totdat u 'provisioningState' hebt gemaakt bij 'Succeeded'.

Default value: False
--custom

Wacht tot de voorwaarde voldoet aan een aangepaste JMESPath-query. Bijvoorbeeld provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].

--deleted

Wacht totdat deze is verwijderd.

Default value: False
--exists

Wacht tot de resource bestaat.

Default value: False
--ids

Een of meer resource-id's (met spatie gescheiden). Dit moet een volledige resource-id zijn die alle informatie over de argumenten Resource-id bevat. Geef de argumenten --id's of andere resource-id's op.

--interval

Polling-interval in seconden.

Default value: 30
--resource-group -g

De naam van de resourcegroep. U kunt de standaardgroep configureren met behulp van az configure --defaults group=<name>.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--timeout

Maximale wachttijd in seconden.

Default value: 3600
--updated

Wacht totdat deze is bijgewerkt met provisioningState op 'Succeeded'.

Default value: False
--workspace-name

De naam van de werkruimte.

Globale parameters
--debug

Vergroot de uitgebreidheid van logboekregistratie om alle logboeken voor foutopsporing weer te geven.

--help -h

Dit Help-bericht weergeven en afsluiten.

--only-show-errors

Alleen fouten weergeven, waarschuwingen onderdrukken.

--output -o

Uitvoerindeling.

Geaccepteerde waarden: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath-queryreeks. Zie http://jmespath.org/ voor meer informatie en voorbeelden.

--subscription

Naam of id van het abonnement. U kunt het standaardabonnement configureren met behulp van az account set -s NAME_OR_ID.

--verbose

Vergroot de uitgebreidheid van logboekregistratie. Gebruik --debug voor volledige foutopsporingslogboeken.