azdata bdc spark batch
Si applica: all'interfaccia della riga di comando di Azure Data (azdata
)
L'articolo seguente fornisce informazioni di riferimento sui comandi sql dello strumento azdata. Per altre informazioni su altri comandi azdata, vedere Informazioni di riferimento su azdata.
Comandi
Comando | Descrizione |
---|---|
azdata bdc spark batch create | Crea un nuovo batch Spark. |
azdata bdc spark batch list | Elenca tutti i batch in Spark. |
azdata bdc spark batch info | Ottiene informazioni su un batch Spark attivo. |
azdata bdc spark batch log | Ottenere i log di esecuzione relativi a un batch Spark. |
azdata bdc spark batch state | Ottenere lo stato di esecuzione per un batch Spark. |
azdata bdc spark batch delete | Elimina un batch Spark. |
azdata bdc spark batch create
Crea un nuovo processo batch Spark che esegue il codice fornito.
azdata bdc spark batch create --file -f
[--class-name -c]
[--arguments -a]
[--jar-files -j]
[--py-files -p]
[--files]
[--driver-memory]
[--driver-cores]
[--executor-memory]
[--executor-cores]
[--executor-count]
[--archives]
[--queue -q]
[--name -n]
[--config]
Esempi
Crea un nuovo batch Spark.
azdata spark batch create --code "2+2"
Parametri necessari
--file -f
Percorso del file da eseguire.
Parametri facoltativi
--class-name -c
Nome della classe da eseguire quando si passa uno o più file con estensione JAR.
--arguments -a
Elenco di argomenti. Per passare un elenco JSON, codificare i valori. Esempio: '["entry1", "entry2"]'.
--jar-files -j
Elenco di percorsi di file JAR. Per passare un elenco JSON, codificare i valori. Esempio: '["entry1", "entry2"]'.
--py-files -p
Elenco di percorsi di file Python. Per passare un elenco JSON, codificare i valori. Esempio: '["entry1", "entry2"]'.
--files
Elenco di percorsi di file. Per passare un elenco JSON, codificare i valori. Esempio: '["entry1", "entry2"]'.
--driver-memory
Quantità di memoria da allocare al driver. Specificare le unità come parte del valore. Esempio: 512 M o 2 G.
--driver-cores
Quantità di core CPU da allocare al driver.
--executor-memory
Quantità di memoria da allocare all'esecutore. Specificare le unità come parte del valore. Esempio: 512 M o 2 G.
--executor-cores
Quantità di core CPU da allocare all'esecutore.
--executor-count
Numero di istanze dell'esecutore da eseguire.
--archives
Elenco di percorsi di archivi. Per passare un elenco JSON, codificare i valori. Esempio: '["entry1", "entry2"]'.
--queue -q
Nome della coda di Spark in cui eseguire la sessione.
--name -n
Nome della sessione Spark.
--config
Elenco di coppie nome-valore contenenti valori di configurazione Spark. Codificati come dizionario JSON. Esempio: '{"name":"value", "name2":"value2"}'.
Argomenti globali
--debug
Aumenta il livello di dettaglio della registrazione per mostrare tutti i log di debug.
--help -h
Visualizza questo messaggio della guida ed esce.
--output -o
Formato di output. Valori consentiti: json, jsonc, table, tsv. Valore predefinito: json.
--query -q
Stringa di query JMESPath. Per altre informazioni ed esempi, vedere http://jmespath.org/.
--verbose
Aumenta il livello di dettaglio della registrazione. Usare --debug per log di debug completi.
azdata bdc spark batch list
Elenca tutti i batch in Spark.
azdata bdc spark batch list
Esempi
Elencare tutti i batch attivi.
azdata spark batch list
Argomenti globali
--debug
Aumenta il livello di dettaglio della registrazione per mostrare tutti i log di debug.
--help -h
Visualizza questo messaggio della guida ed esce.
--output -o
Formato di output. Valori consentiti: json, jsonc, table, tsv. Valore predefinito: json.
--query -q
Stringa di query JMESPath. Per altre informazioni ed esempi, vedere http://jmespath.org/.
--verbose
Aumenta il livello di dettaglio della registrazione. Usare --debug per log di debug completi.
azdata bdc spark batch info
Ottiene le informazioni relative a un batch Spark con l'ID specificato. L'ID del batch viene restituito da "spark batch create".
azdata bdc spark batch info --batch-id -i
Esempi
Ottenere le informazioni sul batch con ID 0.
azdata spark batch info --batch-id 0
Parametri necessari
--batch-id -i
Numero ID del batch Spark.
Argomenti globali
--debug
Aumenta il livello di dettaglio della registrazione per mostrare tutti i log di debug.
--help -h
Visualizza questo messaggio della guida ed esce.
--output -o
Formato di output. Valori consentiti: json, jsonc, table, tsv. Valore predefinito: json.
--query -q
Stringa di query JMESPath. Per altre informazioni ed esempi, vedere http://jmespath.org/.
--verbose
Aumenta il livello di dettaglio della registrazione. Usare --debug per log di debug completi.
azdata bdc spark batch log
Ottiene le voci di log relative a un batch Spark con l'ID specificato. L'ID del batch viene restituito da "spark batch create".
azdata bdc spark batch log --batch-id -i
Esempi
Ottiene il log relativo al batch con ID 0.
azdata spark batch log --batch-id 0
Parametri necessari
--batch-id -i
Numero ID del batch Spark.
Argomenti globali
--debug
Aumenta il livello di dettaglio della registrazione per mostrare tutti i log di debug.
--help -h
Visualizza questo messaggio della guida ed esce.
--output -o
Formato di output. Valori consentiti: json, jsonc, table, tsv. Valore predefinito: json.
--query -q
Stringa di query JMESPath. Per altre informazioni ed esempi, vedere http://jmespath.org/.
--verbose
Aumenta il livello di dettaglio della registrazione. Usare --debug per log di debug completi.
azdata bdc spark batch state
Ottiene lo stato di un batch Spark con l'ID specificato. L'ID del batch viene restituito da "spark batch create".
azdata bdc spark batch state --batch-id -i
Esempi
Ottiene lo stato del batch con ID 0.
azdata spark batch state --batch-id 0
Parametri necessari
--batch-id -i
Numero ID del batch Spark.
Argomenti globali
--debug
Aumenta il livello di dettaglio della registrazione per mostrare tutti i log di debug.
--help -h
Visualizza questo messaggio della guida ed esce.
--output -o
Formato di output. Valori consentiti: json, jsonc, table, tsv. Valore predefinito: json.
--query -q
Stringa di query JMESPath. Per altre informazioni ed esempi, vedere http://jmespath.org/.
--verbose
Aumenta il livello di dettaglio della registrazione. Usare --debug per log di debug completi.
azdata bdc spark batch delete
Elimina un batch Spark. L'ID del batch viene restituito da "spark batch create".
azdata bdc spark batch delete --batch-id -i
Esempi
Eliminare un batch.
azdata spark batch delete --batch-id 0
Parametri necessari
--batch-id -i
Numero ID del batch Spark.
Argomenti globali
--debug
Aumenta il livello di dettaglio della registrazione per mostrare tutti i log di debug.
--help -h
Visualizza questo messaggio della guida ed esce.
--output -o
Formato di output. Valori consentiti: json, jsonc, table, tsv. Valore predefinito: json.
--query -q
Stringa di query JMESPath. Per altre informazioni ed esempi, vedere http://jmespath.org/.
--verbose
Aumenta il livello di dettaglio della registrazione. Usare --debug per log di debug completi.
Passaggi successivi
Per altre informazioni su altri comandi azdata, vedere Informazioni di riferimento su azdata.
Per altre informazioni su come installare lo strumento azdata, vedere Installare azdata.