运行 Spark 代码

已完成

要在 Microsoft Fabric 中编辑和运行 Spark 代码,可以使用笔记本,也可以定义 Spark 作业。

笔记本

如果要使用 Spark 交互式浏览和分析数据,请使用笔记本。 借助笔记本,可以组合文本、图像和使用多种语言编写的代码,以创建可与他人共享和协作的交互式项目。

Microsoft Fabric 中笔记本的屏幕截图。

笔记本由一个或多个单元格组成,每个单元格可以包含 markdown 格式的内容或可执行代码。 可以在笔记本中以交互方式运行代码,并立即查看结果。

Spark 作业定义

如果要在自动化过程中使用 Spark 引入和转换数据,可以定义 Spark 作业以按需或基于计划运行脚本。

Microsoft Fabric 中 Spark 作业定义的截图。

要配置 Spark 作业,请在工作区中创建 Spark 作业定义,并指定它应运行的脚本。 还可以指定参考文件(例如,包含脚本中使用的函数定义的 Python 代码文件),以及对包含脚本所处理数据的特定湖屋的引用。