在管道中使用笔记本活动
在 Azure 数据工厂中为 Azure Databricks 工作区创建链接服务后,可以使用它来定义管道中笔记本活动的连接。
若要使用笔记本活动,请创建管道并从 Databricks 类别中将笔记本活动添加到管道设计器图面。
使用以下笔记本活动属性对其进行配置:
类别 | 设置 | 说明 |
---|---|---|
常规 | 名称 | 活动的唯一名称。 |
说明 | 有意义的说明。 | |
超时 | 活动在自动取消之前应运行多长时间。 | |
重试 | Azure 数据工厂在失败之前应尝试多少次。 | |
重试间隔 | 重试前等待多长时间。 | |
保护输入和输出 | 确定是否记录输入和输出值。 | |
Azure Databricks | Azure Databricks 链接服务 | 包含笔记本的 Azure Databricks 工作区的链接服务。 |
设置 | 笔记本路径 | 指向工作区中笔记本文件的路径。 |
基参数 | 用于将参数传递至笔记本。 | |
追加库 | 默认情况下未安装所需的代码库。 | |
用户属性 | 用户定义的自定义属性。 |
运行管道
发布包含笔记本活动的管道后,可以通过定义触发器来运行该管道。 然后,可以在 Azure 数据工厂工作室的“监视”部分中监视管道运行。