다음을 통해 공유

az synapse spark pool

  • 참조

Spark 풀을 관리합니다.

명령

Name Description 형식 상태
az synapse spark pool create

Spark 풀을 만듭니다.

 핵심 GA
az synapse spark pool delete

Spark 풀을 삭제합니다.

 핵심 GA
az synapse spark pool list

모든 Spark 풀을 나열합니다.

 핵심 GA
az synapse spark pool show

Spark 풀을 가져옵니다.

 핵심 GA
az synapse spark pool update

Spark 풀을 업데이트합니다.

 핵심 GA
az synapse spark pool wait

Spark 풀의 조건이 충족될 때까지 CLI를 대기 상태로 설정합니다.

 핵심 GA

az synapse spark pool create

편집

Spark 풀을 만듭니다.

az synapse spark pool create --name
                             --node-count
                             --node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}
                             --resource-group
                             --spark-version
                             --workspace-name
                             [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--no-wait]
                             [--node-size-family {HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None}]
                             [--spark-config-file-path]
                             [--spark-events-folder]
                             [--spark-log-folder]
                             [--tags]

예제

Spark 풀을 만듭니다.

az synapse spark pool create --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-version 2.4 --node-count 3 --node-size Medium --spark-config-file-path 'path/configfile.txt'

필수 매개 변수

--name -n

Spark 풀의 이름입니다.

--node-count

노드 수입니다.

--node-size

빅 데이터 풀의 각 노드에 있는 컴퓨팅 성능 수준입니다.

허용되는 값: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--resource-group -g

리소스 그룹의 이름입니다. 를 사용하여 az configure --defaults group=<name>기본 그룹을 구성할 수 있습니다.

--spark-version

지원되는 Spark 버전은 현재 2.4입니다.

--workspace-name

작업 영역 이름입니다.

선택적 매개 변수

--delay

단위가 분인 지연 시간입니다.

--enable-auto-pause

자동 일시 중지를 사용하도록 설정하는 플래그입니다.

허용되는 값: false, true
--enable-auto-scale

자동 크기 조정을 사용하도록 설정하는 플래그입니다.

허용되는 값: false, true
--enable-dynamic-exec

동적 실행기 할당을 사용할지 여부를 나타냅니다.

허용되는 값: false, true
--max-executors

할당된 실행기의 최대 수입니다.

--max-node-count

최대 노드 수입니다.

--min-executors

할당된 최소 실행기 수입니다.

--min-node-count

최소 노드 수입니다.

--no-wait

장기 실행 작업이 완료되기를 기다리지 마세요.

Default value: False
--node-size-family

빅 데이터 풀에서 제공하는 노드의 종류입니다.

허용되는 값: HardwareAcceleratedFPGA, HardwareAcceleratedGPU, MemoryOptimized, None
Default value: MemoryOptimized
--spark-config-file-path

Spark 풀 속성 구성 파일의 절대 경로입니다.

--spark-events-folder

Spark 이벤트 폴더입니다.

Default value: /events
--spark-log-folder

기본 Spark 로그 폴더입니다.

Default value: /logs
--tags

공백으로 구분된 태그: key[=value] [key[=value] ...]. ""를 사용하여 기존 태그를 지웁니다.

전역 매개 변수
--debug

로깅의 자세한 정도를 늘려 모든 디버그 로그를 표시합니다.

--help -h

이 도움말 메시지를 표시하고 종료합니다.

--only-show-errors

경고를 표시하지 않고 오류만 표시합니다.

--output -o

출력 형식입니다.

허용되는 값: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath 쿼리 문자열입니다. 자세한 내용과 예제는 http://jmespath.org/를 참조하세요.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--verbose

로깅의 자세한 정도를 늘립니다. 전체 디버그 로그를 표시하려면 --debug를 사용합니다.

az synapse spark pool delete

편집

Spark 풀을 삭제합니다.

az synapse spark pool delete [--ids]
                             [--name]
                             [--no-wait]
                             [--resource-group]
                             [--subscription]
                             [--workspace-name]
                             [--yes]

예제

Spark 풀을 삭제합니다.

az synapse spark pool delete --name testpool --workspace-name testsynapseworkspace --resource-group rg

선택적 매개 변수

--ids

하나 이상의 리소스 ID(공백으로 구분)입니다. '리소스 ID' 인수의 모든 정보를 포함하는 전체 리소스 ID여야 합니다. --ids 또는 다른 '리소스 ID' 인수를 제공해야 합니다.

--name -n

Spark 풀의 이름입니다.

--no-wait

장기 실행 작업이 완료되기를 기다리지 마세요.

Default value: False
--resource-group -g

리소스 그룹의 이름입니다. 를 사용하여 az configure --defaults group=<name>기본 그룹을 구성할 수 있습니다.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--workspace-name

작업 영역 이름입니다.

--yes -y

확인 메시지를 표시하지 않습니다.

Default value: False
전역 매개 변수
--debug

로깅의 자세한 정도를 늘려 모든 디버그 로그를 표시합니다.

--help -h

이 도움말 메시지를 표시하고 종료합니다.

--only-show-errors

경고를 표시하지 않고 오류만 표시합니다.

--output -o

출력 형식입니다.

허용되는 값: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath 쿼리 문자열입니다. 자세한 내용과 예제는 http://jmespath.org/를 참조하세요.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--verbose

로깅의 자세한 정도를 늘립니다. 전체 디버그 로그를 표시하려면 --debug를 사용합니다.

az synapse spark pool list

편집

모든 Spark 풀을 나열합니다.

az synapse spark pool list --resource-group
                           --workspace-name

예제

모든 Spark 풀을 나열합니다.

az synapse spark pool list --workspace-name testsynapseworkspace --resource-group rg

필수 매개 변수

--resource-group -g

리소스 그룹의 이름입니다. 를 사용하여 az configure --defaults group=<name>기본 그룹을 구성할 수 있습니다.

--workspace-name

작업 영역 이름입니다.

전역 매개 변수
--debug

로깅의 자세한 정도를 늘려 모든 디버그 로그를 표시합니다.

--help -h

이 도움말 메시지를 표시하고 종료합니다.

--only-show-errors

경고를 표시하지 않고 오류만 표시합니다.

--output -o

출력 형식입니다.

허용되는 값: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath 쿼리 문자열입니다. 자세한 내용과 예제는 http://jmespath.org/를 참조하세요.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--verbose

로깅의 자세한 정도를 늘립니다. 전체 디버그 로그를 표시하려면 --debug를 사용합니다.

az synapse spark pool show

편집

Spark 풀을 가져옵니다.

az synapse spark pool show [--ids]
                           [--name]
                           [--resource-group]
                           [--subscription]
                           [--workspace-name]

예제

Spark 풀을 가져옵니다.

az synapse spark pool show --name testpool --workspace-name testsynapseworkspace --resource-group rg

선택적 매개 변수

--ids

하나 이상의 리소스 ID(공백으로 구분)입니다. '리소스 ID' 인수의 모든 정보를 포함하는 전체 리소스 ID여야 합니다. --ids 또는 다른 '리소스 ID' 인수를 제공해야 합니다.

--name -n

Spark 풀의 이름입니다.

--resource-group -g

리소스 그룹의 이름입니다. 를 사용하여 az configure --defaults group=<name>기본 그룹을 구성할 수 있습니다.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--workspace-name

작업 영역 이름입니다.

전역 매개 변수
--debug

로깅의 자세한 정도를 늘려 모든 디버그 로그를 표시합니다.

--help -h

이 도움말 메시지를 표시하고 종료합니다.

--only-show-errors

경고를 표시하지 않고 오류만 표시합니다.

--output -o

출력 형식입니다.

허용되는 값: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath 쿼리 문자열입니다. 자세한 내용과 예제는 http://jmespath.org/를 참조하세요.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--verbose

로깅의 자세한 정도를 늘립니다. 전체 디버그 로그를 표시하려면 --debug를 사용합니다.

az synapse spark pool update

편집

Spark 풀을 업데이트합니다.

az synapse spark pool update [--delay]
                             [--enable-auto-pause {false, true}]
                             [--enable-auto-scale {false, true}]
                             [--enable-dynamic-exec {false, true}]
                             [--force {false, true}]
                             [--ids]
                             [--library-requirements]
                             [--max-executors]
                             [--max-node-count]
                             [--min-executors]
                             [--min-node-count]
                             [--name]
                             [--no-wait]
                             [--node-count]
                             [--node-size {Large, Medium, None, Small, XLarge, XXLarge, XXXLarge}]
                             [--package]
                             [--package-action {Add, Remove}]
                             [--resource-group]
                             [--spark-config-file-path]
                             [--subscription]
                             [--tags]
                             [--workspace-name]

예제

Spark 풀의 태그를 업데이트합니다.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--tags key1=value1

Spark 풀의 자동 크기 조정 구성을 업데이트합니다.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-auto-scale --min-node-count 3 --max-node-count 100

Spark 풀의 사용자 지정 라이브러리를 업데이트합니다.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--package-action Add --package package1.jar package2.jar

Spark 풀의 구성 파일을 업데이트합니다.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--spark-config-file-path 'path/configfile.txt'

Spark 풀의 동적 실행기 할당 구성을 업데이트합니다.

az synapse spark pool update --name testpool --workspace-name testsynapseworkspace --resource-group rg \
--enable-dynamic-exec --min-executors 3 --max-executors 10

선택적 매개 변수

--delay

단위가 분인 지연 시간입니다.

--enable-auto-pause

자동 일시 중지를 사용하도록 설정하는 플래그입니다.

허용되는 값: false, true
--enable-auto-scale

자동 크기 조정을 사용하도록 설정하는 플래그입니다.

허용되는 값: false, true
--enable-dynamic-exec

동적 실행기 할당을 사용할지 여부를 나타냅니다.

허용되는 값: false, true
--force

힘 작업의 플래그입니다.

허용되는 값: false, true
Default value: False
--ids

하나 이상의 리소스 ID(공백으로 구분)입니다. '리소스 ID' 인수의 모든 정보를 포함하는 전체 리소스 ID여야 합니다. --ids 또는 다른 '리소스 ID' 인수를 제공해야 합니다.

--library-requirements

라이브러리 요구 사항 파일입니다.

--max-executors

할당된 실행기의 최대 수입니다.

--max-node-count

최대 노드 수입니다.

--min-executors

할당된 최소 실행기 수입니다.

--min-node-count

최소 노드 수입니다.

--name -n

Spark 풀의 이름입니다.

--no-wait

장기 실행 작업이 완료되기를 기다리지 마세요.

Default value: False
--node-count

노드 수입니다.

--node-size

빅 데이터 풀의 각 노드에 있는 컴퓨팅 성능 수준입니다.

허용되는 값: Large, Medium, None, Small, XLarge, XXLarge, XXXLarge
--package

작업 영역 패키지 이름 목록입니다.

--package-action

Apache Spark 풀에서 작업 영역 패키지를 추가하거나 제거할 때 패키지 작업을 지정해야 합니다.

허용되는 값: Add, Remove
--resource-group -g

리소스 그룹의 이름입니다. 를 사용하여 az configure --defaults group=<name>기본 그룹을 구성할 수 있습니다.

--spark-config-file-path

Spark 풀 속성 구성 파일의 절대 경로입니다.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--tags

공백으로 구분된 태그: key[=value] [key[=value] ...]. ""를 사용하여 기존 태그를 지웁니다.

--workspace-name

작업 영역 이름입니다.

전역 매개 변수
--debug

로깅의 자세한 정도를 늘려 모든 디버그 로그를 표시합니다.

--help -h

이 도움말 메시지를 표시하고 종료합니다.

--only-show-errors

경고를 표시하지 않고 오류만 표시합니다.

--output -o

출력 형식입니다.

허용되는 값: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath 쿼리 문자열입니다. 자세한 내용과 예제는 http://jmespath.org/를 참조하세요.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--verbose

로깅의 자세한 정도를 늘립니다. 전체 디버그 로그를 표시하려면 --debug를 사용합니다.

az synapse spark pool wait

편집

Spark 풀의 조건이 충족될 때까지 CLI를 대기 상태로 설정합니다.

az synapse spark pool wait --big-data-pool-name
                           [--created]
                           [--custom]
                           [--deleted]
                           [--exists]
                           [--ids]
                           [--interval]
                           [--resource-group]
                           [--subscription]
                           [--timeout]
                           [--updated]
                           [--workspace-name]

필수 매개 변수

--big-data-pool-name

빅 데이터 풀 이름입니다.

선택적 매개 변수

--created

'Succeeded'에서 'provisioningState'를 사용하여 생성될 때까지 기다립니다.

Default value: False
--custom

조건이 사용자 지정 JMESPath 쿼리를 충족할 때까지 기다립니다. 예: provisioningState!='InProgress', instanceView. 상태es[?code=='PowerState/running'].

--deleted

삭제될 때까지 기다립니다.

Default value: False
--exists

리소스가 존재할 때까지 기다립니다.

Default value: False
--ids

하나 이상의 리소스 ID(공백으로 구분)입니다. '리소스 ID' 인수의 모든 정보를 포함하는 전체 리소스 ID여야 합니다. --ids 또는 다른 '리소스 ID' 인수를 제공해야 합니다.

--interval

폴링 간격(초)입니다.

Default value: 30
--resource-group -g

리소스 그룹의 이름입니다. 를 사용하여 az configure --defaults group=<name>기본 그룹을 구성할 수 있습니다.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--timeout

최대 대기 시간(초)입니다.

Default value: 3600
--updated

'Succeeded'에서 provisioningState로 업데이트될 때까지 기다립니다.

Default value: False
--workspace-name

작업 영역 이름입니다.

전역 매개 변수
--debug

로깅의 자세한 정도를 늘려 모든 디버그 로그를 표시합니다.

--help -h

이 도움말 메시지를 표시하고 종료합니다.

--only-show-errors

경고를 표시하지 않고 오류만 표시합니다.

--output -o

출력 형식입니다.

허용되는 값: json, jsonc, none, table, tsv, yaml, yamlc
Default value: json
--query

JMESPath 쿼리 문자열입니다. 자세한 내용과 예제는 http://jmespath.org/를 참조하세요.

--subscription

구독의 이름 또는 ID입니다. 를 사용하여 az account set -s NAME_OR_ID기본 구독을 구성할 수 있습니다.

--verbose

로깅의 자세한 정도를 늘립니다. 전체 디버그 로그를 표시하려면 --debug를 사용합니다.