已知问题 - 监视中心显示不正确的排队持续时间
当容量使用率达到在 Spark 上的计算上限时,Spark 作业将排队。 达到限制后,作业将被添加到队列中。 然后,当核心在容量中可用时,将处理这些作业。 此排队功能为 Spark 上的所有后台作业(包括从作业计划程序、管道和 Spark 作业定义触发的 Spark 笔记本)启用。 作业在队列中等待的持续时间未在监视中心内正确表示为排队持续时间。
状态:待解决
产品体验:数据工程
症状
监视中心中显示的作业的总持续时间目前仅包括作业执行时间。 总持续时间未正确反映作业在队列中等待的持续时间。
解决方案和解决方法
当作业处于队列中时,监视视图中的状态会显示为 Not Started。 作业开始执行后,在监控界面中状态将更新为 正在进行。 使用作业状态指示器了解作业在何时排队,以及作业的执行何时正在进行。