Запуск кода Spark

Завершено

Чтобы изменить и запустить код Spark в Microsoft Fabric, можно использовать записные книжки или определить задание Spark.

Записные книжки

Если вы хотите использовать Spark для интерактивного изучения и анализа данных, используйте записную книжку. Записные книжки позволяют объединять текст, изображения и код, написанные на нескольких языках, чтобы создать интерактивный элемент, который можно совместно использовать с другими пользователями и совместно работать.

Снимок экрана: записная книжка в Microsoft Fabric.

Записные книжки состоят из одной или нескольких ячеек, каждая из которых может содержать содержимое с разметкой или исполняемый код. Вы можете запустить код в интерактивном режиме в записной книжке и сразу просмотреть результаты.

Определение задания Spark

Если вы хотите использовать Spark для приема и преобразования данных в рамках автоматизированного процесса, можно определить задание Spark для выполнения скрипта по запросу или на основе расписания.

Снимок экрана: определение задания Spark в Microsoft Fabric.

Чтобы настроить задание Spark, создайте определение задания Spark в рабочей области и укажите скрипт, который он должен запустить. Можно также указать ссылочный файл (например, файл кода Python, содержащий определения функций, используемых в скрипте) и ссылку на определенный lakehouse, содержащий данные, которые обрабатываются скриптом.