已知问题 - 监视中心显示错误的排队持续时间

当容量使用率达到它在 Spark 上的计算上限时,Spark 作业将排队。 达到限制后,作业将添加到队列。 然后,当核心在容量中可用时,将处理这些作业。 此排队功能为 Spark 上的所有后台作业(包括从作业计划程序、管道和 Spark 作业定义触发的 Spark 笔记本)启用。 作业在队列中等待的持续时间未在监视中心内正确表示为排队持续时间。

状态:待处理

产品体验: 数据工程

现象

监视中心内显示的作业的总持续时间目前仅包括作业执行时间。 总持续时间未正确反映作业在队列中等待的持续时间。

解决方案和缓解措施

当作业处于队列中时,状态在监视视图中显示为“未启动”。 作业开始执行后,状态在监视视图中更新为“正在进行”。 使用作业状态指示器了解作业在何时排队,以及作业的执行何时正在进行。

后续步骤