运行 Spark 代码

已完成

要在 Microsoft Fabric 中编辑和运行 Spark 代码,可以使用笔记本,也可以定义 Spark 作业。

Notebooks

如果要使用 Spark 交互式浏览和分析数据,请使用笔记本。 借助笔记本,你可以组合使用多种语言编写的文本、图像和代码,以创建可与其他人共享并协作处理的交互式项目。

Microsoft Fabric 中笔记本的屏幕截图。

笔记本由一个或多个单元格组成,每个单元格可以包含 markdown 格式的内容或可执行代码。 可以在笔记本中以交互方式运行代码,并立即查看结果。

Spark 作业定义

如果要在自动化过程中使用 Spark 引入和转换数据,可以定义 Spark 作业以按需或基于计划运行脚本。

Microsoft Fabric 中 Spark 作业定义的截图。

要配置 Spark 作业,请在工作区中创建 Spark 作业定义,并指定它应运行的脚本。 还可以指定参考文件(例如,包含脚本中使用的函数定义的 Python 代码文件),以及对包含脚本所处理数据的特定湖屋的引用。