Dela via

az synapse spark pool

  • Referens

Hantera Spark-pooler.

Kommandon

Name Description Typ Status
az synapse spark pool create

Skapa en Spark-pool.

 Kärna Allmän tillgänglighet
az synapse spark pool delete

Ta bort en Spark-pool.

 Kärna Allmän tillgänglighet
az synapse spark pool list

Visa en lista över alla Spark-pooler.

 Kärna Allmän tillgänglighet
az synapse spark pool show

Skaffa en Spark-pool.

 Kärna Allmän tillgänglighet
az synapse spark pool update

Uppdatera Spark-poolen.

 Kärna Allmän tillgänglighet
az synapse spark pool wait

Placera CLI i vänteläge tills ett villkor för en Spark-pool uppfylls.

 Kärna Allmän tillgänglighet

az synapse spark pool create

Redigera

Skapa en Spark-pool.

az synapse spark pool create --name
                             --node-count
                             --node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
                             --resource-group
                             --spark-version
                             --workspace-name
                             [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--no-wait]
                             [--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
                             [--spark-config-file-path]
                             [--spark-events-folder]
                             [--spark-log-folder]
                             [--tags]

Exempel

Skapa en Spark-pool.

az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'

Obligatoriska parametrar

--name -n

Namnet på Spark-poolen.

--node-count

Antalet noder.

--node-size

Den beräkningsnivå som varje nod i stordatapoolen har..

Godkända värden: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--resource-group -g

Namnet på resursgruppen. Du kan konfigurera standardgruppen med .az configure --defaults group=<name>

--spark-version

Spark-versionen som stöds är 2.4 nu.

--workspace-name

Namnet på arbetsytan.

Valfria parametrar

--delay

Fördröjningstiden vars enhet är minut.

--enable-auto-pause

Flaggan för att aktivera automatisk paus.

Godkända värden: false, true
--enable-auto-scale

Flaggan för att aktivera automatisk skalning.

Godkända värden: false, true
--enable-dynamic-exec

Anger om dynamisk körallokering är aktiverat eller inte.

Godkända värden: false, true
--max-executors

Det maximala antalet exekutorer har tilldelats.

--max-node-count

Maximalt antal noder.

--min-executors

Det minsta antalet exekutorer som tilldelas.

--min-node-count

Minsta antal noder.

--no-wait

Vänta inte tills den långvariga åtgärden har slutförts.

Standardvärde: False
--node-size-family

Den typ av noder som stordatapoolen tillhandahåller.

Godkända värden: HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None
Standardvärde: MemoryOptimized
--spark-config-file-path

Absolut sökväg för konfigurationsfilen för Egenskaper för Spark-pool.

--spark-events-folder

Mappen Spark-händelser.

Standardvärde: /events
--spark-log-folder

Standardmappen för Spark-loggen.

Standardvärde: /logs
--tags

Blankstegsavgränsade taggar: key[=value] [key[=value] ...]. Använd "" för att rensa befintliga taggar.

Globala parametrar
--debug

Öka loggningsverositeten för att visa alla felsökningsloggar.

--help -h

Visa det här hjälpmeddelandet och avsluta.

--only-show-errors

Visa bara fel och ignorera varningar.

--output -o

Utdataformat.

Godkända värden: json, jsonc, none, table, tsv, yaml, yamlc
Standardvärde: json
--query

JMESPath-frågesträng. Mer http://jmespath.org/ information och exempel finns i.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--verbose

Öka loggningsverbositeten. Använd --debug för fullständiga felsökningsloggar.

az synapse spark pool delete

Redigera

Ta bort en Spark-pool.

az synapse spark pool delete [--ids]
                             [--name]
                             [--no-wait]
                             [--resource-group]
                             [--subscription]
                             [--workspace-name]
                             [--yes]

Exempel

Ta bort en Spark-pool.

az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg

Valfria parametrar

--ids

Ett eller flera resurs-ID:t (utrymmesavgränsade). Det bör vara ett fullständigt resurs-ID som innehåller all information om argumenten "Resurs-ID". Du bör ange antingen --id eller andra "Resurs-ID"-argument.

--name -n

Namnet på Spark-poolen.

--no-wait

Vänta inte tills den långvariga åtgärden har slutförts.

Standardvärde: False
--resource-group -g

Namnet på resursgruppen. Du kan konfigurera standardgruppen med .az configure --defaults group=<name>

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--workspace-name

Namnet på arbetsytan.

--yes -y

Fråga inte efter bekräftelse.

Standardvärde: False
Globala parametrar
--debug

Öka loggningsverositeten för att visa alla felsökningsloggar.

--help -h

Visa det här hjälpmeddelandet och avsluta.

--only-show-errors

Visa bara fel och ignorera varningar.

--output -o

Utdataformat.

Godkända värden: json, jsonc, none, table, tsv, yaml, yamlc
Standardvärde: json
--query

JMESPath-frågesträng. Mer http://jmespath.org/ information och exempel finns i.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--verbose

Öka loggningsverbositeten. Använd --debug för fullständiga felsökningsloggar.

az synapse spark pool list

Redigera

Visa en lista över alla Spark-pooler.

az synapse spark pool list --resource-group
                           --workspace-name

Exempel

Visa en lista över alla Spark-pooler.

az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg

Obligatoriska parametrar

--resource-group -g

Namnet på resursgruppen. Du kan konfigurera standardgruppen med .az configure --defaults group=<name>

--workspace-name

Namnet på arbetsytan.

Globala parametrar
--debug

Öka loggningsverositeten för att visa alla felsökningsloggar.

--help -h

Visa det här hjälpmeddelandet och avsluta.

--only-show-errors

Visa bara fel och ignorera varningar.

--output -o

Utdataformat.

Godkända värden: json, jsonc, none, table, tsv, yaml, yamlc
Standardvärde: json
--query

JMESPath-frågesträng. Mer http://jmespath.org/ information och exempel finns i.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--verbose

Öka loggningsverbositeten. Använd --debug för fullständiga felsökningsloggar.

az synapse spark pool show

Redigera

Skaffa en Spark-pool.

az synapse spark pool show [--ids]
                           [--name]
                           [--resource-group]
                           [--subscription]
                           [--workspace-name]

Exempel

Skaffa en Spark-pool.

az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg

Valfria parametrar

--ids

Ett eller flera resurs-ID:t (utrymmesavgränsade). Det bör vara ett fullständigt resurs-ID som innehåller all information om argumenten "Resurs-ID". Du bör ange antingen --id eller andra "Resurs-ID"-argument.

--name -n

Namnet på Spark-poolen.

--resource-group -g

Namnet på resursgruppen. Du kan konfigurera standardgruppen med .az configure --defaults group=<name>

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--workspace-name

Namnet på arbetsytan.

Globala parametrar
--debug

Öka loggningsverositeten för att visa alla felsökningsloggar.

--help -h

Visa det här hjälpmeddelandet och avsluta.

--only-show-errors

Visa bara fel och ignorera varningar.

--output -o

Utdataformat.

Godkända värden: json, jsonc, none, table, tsv, yaml, yamlc
Standardvärde: json
--query

JMESPath-frågesträng. Mer http://jmespath.org/ information och exempel finns i.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--verbose

Öka loggningsverbositeten. Använd --debug för fullständiga felsökningsloggar.

az synapse spark pool update

Redigera

Uppdatera Spark-poolen.

az synapse spark pool update [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--force {false, true}]
                             [--ids]
                             [--library-requirements]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--name]
                             [--no-wait]
                             [--node-count]
                             [--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
                             [--package]
                             [--package-action {Add, Remove}]
                             [--resource-group]
                             [--spark-config-file-path]
                             [--subscription]
                             [--tags]
                             [--workspace-name]

Exempel

Uppdatera Spark-poolens taggar.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1

Uppdatera Spark-poolens konfiguration för automatisk skalning.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100

Uppdatera Spark-poolens anpassade bibliotek.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar

Uppdatera Spark-poolens konfigurationsfil.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'

Uppdatera Spark-poolens konfiguration för dynamisk körningsallokering.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10

Valfria parametrar

--delay

Fördröjningstiden vars enhet är minut.

--enable-auto-pause

Flaggan för att aktivera automatisk paus.

Godkända värden: false, true
--enable-auto-scale

Flaggan för att aktivera automatisk skalning.

Godkända värden: false, true
--enable-dynamic-exec

Anger om dynamisk körallokering är aktiverat eller inte.

Godkända värden: false, true
--force

Flaggan för kraftåtgärd.

Godkända värden: false, true
Standardvärde: False
--ids

Ett eller flera resurs-ID:t (utrymmesavgränsade). Det bör vara ett fullständigt resurs-ID som innehåller all information om argumenten "Resurs-ID". Du bör ange antingen --id eller andra "Resurs-ID"-argument.

--library-requirements

Filen med bibliotekskrav.

--max-executors

Det maximala antalet exekutorer har tilldelats.

--max-node-count

Maximalt antal noder.

--min-executors

Det minsta antalet exekutorer som tilldelas.

--min-node-count

Minsta antal noder.

--name -n

Namnet på Spark-poolen.

--no-wait

Vänta inte tills den långvariga åtgärden har slutförts.

Standardvärde: False
--node-count

Antalet noder.

--node-size

Den beräkningsnivå som varje nod i stordatapoolen har..

Godkända värden: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--package

Lista över namn på arbetsytepaket.

--package-action

Paketåtgärden måste anges när du lägger till eller tar bort ett arbetsytepaket från en Apache Spark-pool.

Godkända värden: Add, Remove
--resource-group -g

Namnet på resursgruppen. Du kan konfigurera standardgruppen med .az configure --defaults group=<name>

--spark-config-file-path

Absolut sökväg för konfigurationsfilen för Egenskaper för Spark-pool.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--tags

Blankstegsavgränsade taggar: key[=value] [key[=value] ...]. Använd "" för att rensa befintliga taggar.

--workspace-name

Namnet på arbetsytan.

Globala parametrar
--debug

Öka loggningsverositeten för att visa alla felsökningsloggar.

--help -h

Visa det här hjälpmeddelandet och avsluta.

--only-show-errors

Visa bara fel och ignorera varningar.

--output -o

Utdataformat.

Godkända värden: json, jsonc, none, table, tsv, yaml, yamlc
Standardvärde: json
--query

JMESPath-frågesträng. Mer http://jmespath.org/ information och exempel finns i.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--verbose

Öka loggningsverbositeten. Använd --debug för fullständiga felsökningsloggar.

az synapse spark pool wait

Redigera

Placera CLI i vänteläge tills ett villkor för en Spark-pool uppfylls.

az synapse spark pool wait --big-data-pool-name
                           [--created]
                           [--custom]
                           [--deleted]
                           [--exists]
                           [--ids]
                           [--interval]
                           [--resource-group]
                           [--subscription]
                           [--timeout]
                           [--updated]
                           [--workspace-name]

Obligatoriska parametrar

--big-data-pool-name

Namnet på stordatapoolen.

Valfria parametrar

--created

Vänta tills du har skapat med "provisioningState" på "Lyckades".

Standardvärde: False
--custom

Vänta tills villkoret uppfyller en anpassad JMESPath-fråga. T.ex. provisioningState!='InProgress', instanceView.statuses[?code=='PowerState/running'].

--deleted

Vänta tills den har tagits bort.

Standardvärde: False
--exists

Vänta tills resursen finns.

Standardvärde: False
--ids

Ett eller flera resurs-ID:t (utrymmesavgränsade). Det bör vara ett fullständigt resurs-ID som innehåller all information om argumenten "Resurs-ID". Du bör ange antingen --id eller andra "Resurs-ID"-argument.

--interval

Avsökningsintervall i sekunder.

Standardvärde: 30
--resource-group -g

Namnet på resursgruppen. Du kan konfigurera standardgruppen med .az configure --defaults group=<name>

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--timeout

Maximal väntetid i sekunder.

Standardvärde: 3600
--updated

Vänta tills det har uppdaterats med provisioningState på Lyckades.

Standardvärde: False
--workspace-name

Namnet på arbetsytan.

Globala parametrar
--debug

Öka loggningsverositeten för att visa alla felsökningsloggar.

--help -h

Visa det här hjälpmeddelandet och avsluta.

--only-show-errors

Visa bara fel och ignorera varningar.

--output -o

Utdataformat.

Godkända värden: json, jsonc, none, table, tsv, yaml, yamlc
Standardvärde: json
--query

JMESPath-frågesträng. Mer http://jmespath.org/ information och exempel finns i.

--subscription

Namn eller ID för prenumerationen. Du kan konfigurera standardprenumerationen med .az account set -s NAME_OR_ID

--verbose

Öka loggningsverbositeten. Använd --debug för fullständiga felsökningsloggar.