Bekanntes Problem : Der Überwachungshub zeigt falsche Dauer der Warteschlange an.
Spark-Aufträge werden in der Warteschlange eingereiht, wenn die Kapazitätsauslastung ihren maximalen Computegrenzwert für Spark erreicht. Sobald der Grenzwert erreicht ist, werden Aufträge der Warteschlange hinzugefügt. Die Aufträge werden dann verarbeitet, wenn die Kerne in der Kapazität verfügbar werden. Diese Warteschlangenfunktion ist für alle Hintergrundaufträge in Spark aktiviert, einschließlich Spark-Notizbüchern, die vom Auftragsplaner sowie von Pipelines und Spark-Aufträgen ausgelöst werden. Die Dauer, die sich der Auftrag in der Warteschlange befindet, wird im Überwachungshub nicht ordnungsgemäß als Dauer für die Warteschlange dargestellt.
Status: Offen
Produktbereich: Datentechnik
Symptome
Die Gesamtdauer des Auftrags, der im Überwachungshub angezeigt wird, umfasst derzeit nur die Ausführungszeit des Auftrags. Die Gesamtdauer entspricht nicht genau der Dauer, wie lange der Auftrag in der Warteschlange gewartet hat.
Lösungen und Problemumgehungen
Wenn sich der Auftrag in der Warteschlange befindet, wird der Status in der Überwachungsansicht als Nicht gestartet angezeigt. Nachdem der Auftrag die Ausführung gestartet hat, wird der Status in der Überwachungsansicht auf in Bearbeitung aktualisiert. Verwenden Sie die Auftragsstatusanzeige, um zu wissen, wann der Auftrag in die Warteschlange gestellt wird und wann die Ausführung ausgeführt wird.