Γνωστό πρόβλημα - Ο διανομέας παρακολούθησης εμφανίζει εσφαλμένη διάρκεια σε ουρά
Το Spark Jobs τοποθετείται σε ουρά όταν η χρήση εκχωρημένων πόρων φτάσει στο μέγιστο υπολογιστικό της όριο στο Spark. Μόλις συμπληρωιστεί το όριο, προστίθενται εργασίες στην ουρά. Στη συνέχεια, οι εργασίες διεκποιούνται όταν οι πυρήνες καταστούν διαθέσιμοι στους εκχωρημένους πόρους. Αυτή η δυνατότητα ουράς είναι ενεργοποιημένη για όλες τις εργασίες παρασκηνίου στο Spark, συμπεριλαμβανομένων των σημειωματάριων Spark που ενεργοποιούνται από τον προγραμματισμό εργασιών, τις διοχετεύσεις και τους ορισμούς εργασίας spark. Η χρονική διάρκεια που περιμένει η εργασία στην ουρά δεν αναπαρίσταται σωστά στο κέντρο παρακολούθησης ως διάρκεια σε ουρά.
Κατάσταση: Άνοιγμα
Εμπειρία προϊόντων: Διαχείριση δεδομένων
Συμπτώματα
Η συνολική διάρκεια της εργασίας που εμφανίζεται στο Κέντρο παρακολούθησης προς το παρόν περιλαμβάνει μόνο τον χρόνο εκτέλεσης εργασίας. Η συνολική διάρκεια δεν αντικατοπτρίζει σωστά τη διάρκεια κατά την οποία η εργασία περίμενε στην ουρά.
Λύσεις και λύσεις
Όταν η εργασία βρίσκεται στην ουρά, η κατάσταση εμφανίζεται ως Δεν ξεκίνησε στην προβολή παρακολούθησης. Όταν η εργασία ξεκινήσει την εκτέλεση, η κατάσταση ενημερώνεται σε Σε εξέλιξη στην προβολή παρακολούθησης. Χρησιμοποιήστε τον δείκτη κατάστασης εργασίας για να γνωρίζετε πότε η εργασία τοποθετείται σε ουρά και πότε η εκτέλεσή της βρίσκεται σε εξέλιξη.