azdata bdc spark session

Область применения: Azure Data CLI ()azdata

В следующей статье приводятся справочные сведения по командам sql в средстве azdata. Дополнительные сведения о других командах azdata см. в справочнике по azdata.

Команды

Команда	Description
azdata bdc spark session create	Создание сеанса Spark.
azdata bdc spark session list	Вывод списка всех активных сеансов Spark.
azdata bdc spark session info	Получение сведений об активном сеансе Spark.
azdata bdc spark session log	Получение журналов выполнения для активного сеанса Spark.
azdata bdc spark session state	Получение состояния выполнения для активного сеанса Spark.
azdata bdc spark session delete	Удаление сеанса Spark.

azdata bdc spark session create

Создает интерактивный сеанс Spark. Вызывающая сторона должна указать тип сеанса Spark. Этот сеанс находится за пределами времени существования выполнения azdata и должен быть удален с помощью удаления сеанса Spark.

azdata bdc spark session create [--session-kind -k] 
                                [--jar-files -j]  
                                
[--py-files -p]  
                                
[--files -f]  
                                
[--driver-memory]  
                                
[--driver-cores]  
                                
[--executor-memory]  
                                
[--executor-cores]  
                                
[--executor-count]  
                                
[--archives -a]  
                                
[--queue -q]  
                                
[--name -n]  
                                
[--config -c]  
                                
[--timeout-seconds -t]

Примеры

Создание сеанса.

azdata bdc spark session create --session-kind pyspark

Необязательные параметры

--session-kind -k

Название типа создаваемого сеанса. Одно из следующих значений: spark, pyspark, sparkr или sql.

--jar-files -j

Список путей к JAR-файлам. Передача списка значений в кодировке JSON. Пример: "["entry1", "entry2"]".

--py-files -p

Список путей к файлам Python. Передача списка значений в кодировке JSON. Пример: "["entry1", "entry2"]".

--files -f

Список путей к файлам. Передача списка значений в кодировке JSON. Пример: "["entry1", "entry2"]".

--driver-memory

Размер памяти, выделяемой драйверу. Вместе со значением необходимо указать единицы измерения. Пример: 512M или 2G.

--driver-cores

Количество ядер ЦП, выделяемых драйверу.

--executor-memory

Количество памяти, выделяемой исполнителю. Вместе со значением необходимо указать единицы измерения. Пример: 512M или 2G.

--executor-cores

Количество ядер ЦП, выделяемых исполнителю.

--executor-count

Количество запускаемых экземпляров исполнителя.

--archives -a

Список путей к архивам. Передача списка значений в кодировке JSON. Пример: "["entry1", "entry2"]".

--queue -q

Имя очереди Spark, в которой должен выполняться сеанс.

--name -n

Имя сеанса Spark.

--config -c

Список пар "имя–значение", содержащих значения конфигурации Spark. Кодируется как словарь JSON. Пример: "{"имя":"значение", "имя2":"значение2"}".

--timeout-seconds -t

Время ожидания простоя сеанса в секундах.

Глобальные аргументы

--debug

Повышение уровня детализации журнала для включения всех журналов отладки.

--help -h

Отображение этого справочного сообщения и выход.

--output -o

Формат вывода. Допустимые значения: json, jsonc, table, tsv. Значение по умолчанию: json.

--query -q

Строка запроса JMESPath. Дополнительные сведения и примеры см. в разделе http://jmespath.org/.

--verbose

Повышение уровня детализации журнала. Чтобы включить полные журналы отладки, используйте параметр --debug.

azdata bdc spark session list

Вывод списка всех активных сеансов Spark.

azdata bdc spark session list 

Примеры

Вывод списка всех активных сеансов.

azdata spark session list

Глобальные аргументы

--debug

Повышение уровня детализации журнала для включения всех журналов отладки.

--help -h

Отображение этого справочного сообщения и выход.

--output -o

Формат вывода. Допустимые значения: json, jsonc, table, tsv. Значение по умолчанию: json.

--query -q

Строка запроса JMESPath. Дополнительные сведения и примеры см. в разделе http://jmespath.org/.

--verbose

Повышение уровня детализации журнала. Чтобы включить полные журналы отладки, используйте параметр --debug.

azdata bdc spark session info

Возвращает сведения об активном сеансе Spark с указанным идентификатором. Идентификатор сеанса возвращается командой spark session create.

azdata bdc spark session info --session-id -i 
                              

Примеры

Получение сведений о сеансе с идентификатором 0.

azdata spark session info --session-id 0

Обязательные параметры

--session-id -i

Идентификатор сеанса Spark.

Глобальные аргументы

--debug

Повышение уровня детализации журнала для включения всех журналов отладки.

--help -h

Отображение этого справочного сообщения и выход.

--output -o

Формат вывода. Допустимые значения: json, jsonc, table, tsv. Значение по умолчанию: json.

--query -q

Строка запроса JMESPath. Дополнительные сведения и примеры см. в разделе http://jmespath.org/.

--verbose

Повышение уровня детализации журнала. Чтобы включить полные журналы отладки, используйте параметр --debug.

azdata bdc spark session log

Возвращает записи журнала для активного сеанса Spark с указанным идентификатором. Идентификатор сеанса возвращается командой spark session create.

azdata bdc spark session log --session-id -i 
                             

Примеры

Получение журнала для сеанса с идентификатором 0.

azdata spark session log --session-id 0

Обязательные параметры

--session-id -i

Идентификатор сеанса Spark.

Глобальные аргументы

--debug

Повышение уровня детализации журнала для включения всех журналов отладки.

--help -h

Отображение этого справочного сообщения и выход.

--output -o

Формат вывода. Допустимые значения: json, jsonc, table, tsv. Значение по умолчанию: json.

--query -q

Строка запроса JMESPath. Дополнительные сведения и примеры см. в разделе http://jmespath.org/.

--verbose

Повышение уровня детализации журнала. Чтобы включить полные журналы отладки, используйте параметр --debug.

azdata bdc spark session state

Возвращает состояние для активного сеанса Spark с указанным идентификатором. Идентификатор сеанса возвращается командой spark session create.

azdata bdc spark session state --session-id -i 
                               

Примеры

Получение состояния сеанса с идентификатором 0.

azdata spark session state --session-id 0

Обязательные параметры

--session-id -i

Идентификатор сеанса Spark.

Глобальные аргументы

--debug

Повышение уровня детализации журнала для включения всех журналов отладки.

--help -h

Отображение этого справочного сообщения и выход.

--output -o

Формат вывода. Допустимые значения: json, jsonc, table, tsv. Значение по умолчанию: json.

--query -q

Строка запроса JMESPath. Дополнительные сведения и примеры см. в разделе http://jmespath.org/.

--verbose

Повышение уровня детализации журнала. Чтобы включить полные журналы отладки, используйте параметр --debug.

azdata bdc spark session delete

Удаляет интерактивный сеанс Spark. Идентификатор сеанса возвращается командой spark session create.

azdata bdc spark session delete --session-id -i 
                                

Примеры

Удаление сеанса.

azdata spark session delete --session-id 0

Обязательные параметры

--session-id -i

Идентификатор сеанса Spark.

Глобальные аргументы

--debug

Повышение уровня детализации журнала для включения всех журналов отладки.

--help -h

Отображение этого справочного сообщения и выход.

--output -o

Формат вывода. Допустимые значения: json, jsonc, table, tsv. Значение по умолчанию: json.

--query -q

Строка запроса JMESPath. Дополнительные сведения и примеры см. в разделе http://jmespath.org/.

--verbose

Повышение уровня детализации журнала. Чтобы включить полные журналы отладки, используйте параметр --debug.

Следующие шаги

Дополнительные сведения о других командах azdata см. в справочнике по azdata.

Дополнительные сведения об установке средства azdata см. в разделе Установка azdata.