Преобразование данных путем выполнения действия определения задания Spark
Действие "Определение задания Spark" в Фабрике данных для Microsoft Fabric позволяет создавать подключения к определениям заданий Spark и запускать их из конвейера данных.
Необходимые условия
Чтобы приступить к работе, необходимо выполнить следующие предварительные требования:
- Учетная запись клиента с активной подпиской. создайте учетную запись бесплатно.
- Создается рабочая область.
Добавьте действие для определения задания Spark в конвейер через пользовательский интерфейс.
Создайте конвейер данных в рабочей области.
Найдите определение задания Spark на домашней карточке экрана и выберите его или выберите действие на панели действий, чтобы добавить его на холст конвейера.
Создание активности на главном экране:
Создание действия на панели действий:
Выберите новое действие определения задания Spark на холсте редактора конвейера, если оно еще не выбрано.
Ознакомьтесь с руководством по настройке параметров общие параметры, чтобы настроить параметры, найденные на вкладке Общие параметры.
Параметры действия определения задания Spark
Выберите вкладку "Параметры " в области свойств действия, а затем выберите рабочую область Fabric, содержащую определение задания Spark, которое вы хотите запустить.
Известные ограничения
Текущие ограничения в действии определения заданий Spark для фабрики данных Fabric перечислены здесь. Этот раздел подлежит изменению.
- В настоящее время мы не поддерживаем создание новой активности определения задания Spark внутри активности (в параметрах).
- Поддержка параметризации недоступна.
- Хотя мы поддерживаем мониторинг действия с помощью вкладки вывода, вы еще не можете отслеживать определение задания Spark на более детальном уровне. Например, ссылки на страницу мониторинга, состояние, длительность и предыдущие запуски определения задания Spark недоступны непосредственно в Data Factory. Однако более подробные сведения можно просмотреть на странице мониторинга определения заданий Spark.
Сохраните и запустите конвейер или запланируйте его выполнение
После настройки других действий, необходимых для конвейера, перейдите на вкладку "Главная" в верхней части редактора конвейера и нажмите кнопку "Сохранить", чтобы сохранить конвейер. Выберите запустить, чтобы запустить его напрямую, или запланировать. Вы также можете просмотреть журнал выполнения здесь или настроить другие параметры.
