Поделиться через


Планирование и запуск определения задания Apache Spark

Научитесь запускать определение задачи Apache Spark в Microsoft Fabric и узнавать статус и сведения об определении задачи.

Необходимые условия

Прежде чем приступить к работе, необходимо:

Как запустить конфигурацию задания Spark

Существует два способа запуска определения задания Spark:

  • Запустите задание Spark вручную, выбрав Запустить из элемента в списке определений заданий Spark.

    снимок экрана, на котором показано, где выбрать команду

  • Запланируйте определение задания Spark, настроив план расписания на вкладке "Параметры ". Выберите "Параметры " на панели инструментов, а затем выберите "Расписание ".

    снимок экрана, на котором показано, где выбрать расписание на вкладке

Важный

Для выполнения определение задания Spark должно иметь основной файл определения и контекст lakehouse по умолчанию.

Совет

Для выполнения вручную учетная запись пользователя, вошедшего в систему, используется для отправки задания. Для запуска, активированного расписанием, учетная запись пользователя, создавшего план расписания, используется для отправки задания.

Через три-пять секунд после отправки запуска на вкладке Запуски появится новая строка. В ней будут отображены сведения о вашем новом запуске. В столбце состояния отображается состояние задания почти в реальном времени, а в столбце тип выполнения показано, выполняется ли задание вручную или запланировано.

снимок экрана с данными о списке запусков.

Дополнительные сведения о мониторинге задания см. в статье Мониторинг определения задания Apache Spark.

Как отменить выполняемое задание

После отправки задания можно отменить задание, выбрав Отменить активный запуск из элемента определения задания Spark в списке заданий.

снимок экрана, на котором показано, где выбрать пункт

Моментальный снимок определения задания Spark

Определение задания Spark сохраняет последнее состояние. Чтобы просмотреть моментальный снимок истории выполнения, выберите Просмотреть моментальный снимок из элемента определения задания Spark в списке заданий. Моментальный снимок показывает состояние определения задания при отправке задания, включая основной файл определения, ссылочный файл, аргументы командной строки, ссылки на lakehouse и свойства Spark.

снимок экрана, на котором показано, где выбрать пункт

С момента моментального снимка можно выполнить три действия:

  • Сохранить как определение задания Spark: сохраните моментальный снимок в качестве нового определения задания Spark.
  • определение задания Open Spark: откройте текущее определение задания Spark.
  • Восстановление: восстановите конфигурацию задания из резервной копии. Определение задания восстановлено до состояния на момент отправки задания.

снимок экрана: параметры меню моментального снимка.