Παρακολούθηση λεπτομερειών εφαρμογής Apache Spark
Με το Microsoft Fabric, μπορείτε να χρησιμοποιήσετε το Apache Spark για την εκτέλεση σημειωματάριων, εργασιών και άλλων ειδών εφαρμογών στον χώρο εργασίας σας. Αυτό το άρθρο εξηγεί πώς μπορείτε να παρακολουθείτε την εφαρμογή Apache Spark, επιτρέποντάς σας να παρακολουθείτε την κατάσταση πρόσφατων εκτελέσεων, ζητήματα και την πρόοδο των εργασιών σας.
Προβολή εφαρμογών Apache Spark
Μπορείτε να προβάλετε όλες τις εφαρμογές Apache Spark από τον ορισμό εργασίας Spark ή το μενού περιβάλλοντος στοιχείου σημειωματάριου εμφανίζει την επιλογή πρόσφατης εκτέλεσης ->.
Μπορείτε να επιλέξετε το όνομα της εφαρμογής που θέλετε να προβάλετε στη λίστα εφαρμογών, στη σελίδα λεπτομερειών εφαρμογής μπορείτε να δείτε τις λεπτομέρειες της εφαρμογής.
Παρακολούθηση κατάστασης εφαρμογής Apache Spark
Ανοίξτε τη σελίδα Πρόσφατες εκτελέσεις του ορισμού εργασίας σημειωματάριου ή Spark, μπορείτε να προβάλετε την κατάσταση της εφαρμογής Apache.
- Επιτυχία
- Σε ουρά
- Έχει διακοπεί
- Ακυρώθηκε
- Απέτυχε
Θέσεις εργασίας
Ανοίξτε μια εργασία εφαρμογής Apache Spark από το μενού περιβάλλοντος ορισμού εργασίας Spark ή σημειωματάριου που εμφανίζει την επιλογή Πρόσφατη εκτέλεση ->Πρόσφατες εκτελέσεις -> επιλέξτε μια εργασία στη σελίδα πρόσφατων εκτελέσεων.
Στη σελίδα λεπτομερειών παρακολούθησης εφαρμογής Apache Spark, η λίστα εκτελέσεων εργασιών εμφανίζεται στην καρτέλα Εργασίες, μπορείτε να δείτε τις λεπτομέρειες κάθε εργασίας εδώ, συμπεριλαμβανομένου του αναγνωριστικού εργασίας, της περιγραφής, της κατάστασης, των σταδίων, των εργασιών, της διάρκειας, της επεξεργασίας, της ανάγνωσης δεδομένων, των δεδομένων που έχουν συνταχθεί και του τμήματος κώδικα.
- Εάν κάνετε κλικ στο Αναγνωριστικό εργασίας, μπορείτε να αναπτύξετε/συμπτύξετε την εργασία.
- Κάντε κλικ στην περιγραφή της εργασίας, μπορείτε να μεταβείτε στη σελίδα εργασίας ή σταδίου στο περιβάλλον εργασίας spark.
- Κάντε κλικ στο τμήμα κώδικα εργασίας, μπορείτε να ελέγξετε και να αντιγράψετε τον κώδικα που σχετίζεται με αυτήν την εργασία.
Πόροι
Το γράφημα χρήσης του εκτελέσιμο αρχείου στην καρτέλα Πόροι απεικονίζει την εκχώρηση και τη χρήση εκτελέσεων Spark για την τρέχουσα εφαρμογή Spark σε σχεδόν πραγματικό χρόνο κατά την εκτέλεση του Spark. Μπορείτε να αναφερθείτε στα εξής: Παρακολουθήστε τη χρήση πόρων εφαρμογών Apache Spark.
Πίνακας σύνοψης
Στη σελίδα παρακολούθησης εφαρμογής Apache Spark, κάντε κλικ στο κουμπί Ιδιότητες για να ανοίξετε /συμπτύξετε τον πίνακα σύνοψης. Μπορείτε να δείτε τις λεπτομέρειες για αυτήν την εφαρμογή σε Λεπτομέρειες.
- Κατάσταση για αυτήν την εφαρμογή spark.
- Το αναγνωριστικό αυτής της εφαρμογής Spark.
- Συνολική διάρκεια.
- Διάρκεια εκτέλεσης για αυτήν την εφαρμογή spark.
- Διάρκεια σε ουρά για αυτήν την εφαρμογή spark.
- Αναγνωριστικό Livy
- Υποβολή για αυτήν την εφαρμογή spark.
- Υποβάλετε χρόνο για αυτήν την εφαρμογή spark.
- Ο αριθμός των εκτελέσεων.
Αρχεία καταγραφής
Για την καρτέλα Αρχεία καταγραφής , μπορείτε να δείτε όλο το αρχείο καταγραφής Livy, Prelaunch, Driver με διαφορετικές επιλογές στο αριστερό τμήμα παραθύρου. Επίσης, μπορείτε να ανακτήσετε απευθείας τις απαιτούμενες πληροφορίες αρχείου καταγραφής, κάνοντας αναζήτηση σε λέξεις-κλειδιά και να προβάλετε τα αρχεία καταγραφής, φιλτράροντας την κατάσταση αρχείου καταγραφής. Κάντε κλικ στην επιλογή Λήψη αρχείου καταγραφής για να κάνετε λήψη των πληροφοριών αρχείου καταγραφής στην τοπική.
Ορισμένες φορές, δεν υπάρχουν διαθέσιμα αρχεία καταγραφής, όπως η κατάσταση της εργασίας σε ουρά και η δημιουργία συμπλέγματος απέτυχε.
Τα δυναμικά αρχεία καταγραφής είναι διαθέσιμα μόνο όταν αποτυγχάνει η υποβολή της εφαρμογής και παρέχονται επίσης αρχεία καταγραφής προγραμμάτων οδήγησης.
Δεδομένα
Για την καρτέλα Δεδομένα , μπορείτε να αντιγράψετε τη λίστα δεδομένων στο Πρόχειρο, να κάνετε λήψη της λίστας δεδομένων και μεμονωμένων δεδομένων και να ελέγξετε τις ιδιότητες για κάθε δεδομένα.
- Ο αριστερός πίνακας μπορεί να αναπτυχθεί ή να συμπτύξετε.
- Το όνομα, η μορφή ανάγνωσης, το μέγεθος, η προέλευση και η διαδρομή των αρχείων εισόδου και εξόδου θα εμφανίζονται σε αυτήν τη λίστα.
- Είναι δυνατή η λήψη των αρχείων εισόδου και εξόδου, η αντιγραφή διαδρομής και η προβολή ιδιοτήτων.
Στιγμιότυπα στοιχείου
Η καρτέλα Στιγμιότυπα στοιχείου σάς επιτρέπει να περιηγηθείτε και να προβάλετε στοιχεία που σχετίζονται με την εφαρμογή Apache Spark, όπως Σημειωματάρια, ορισμός εργασίας Spark ή/και Διοχετεύσεις. Η σελίδα στιγμιοτύπων στοιχείων εμφανίζει το στιγμιότυπο των τιμών κώδικα και παραμέτρων κατά τη στιγμή της εκτέλεσης για σημειωματάρια. Εμφανίζει επίσης το στιγμιότυπο όλων των ρυθμίσεων και παραμέτρων κατά τη στιγμή της υποβολής για ορισμούς εργασίας Spark. Εάν η εφαρμογή Apache Spark σχετίζεται με μια διοχέτευση, η σελίδα σχετικού στοιχείου εμφανίζει επίσης την αντίστοιχη διοχέτευση και τη δραστηριότητα Spark.
Στην οθόνη Στιγμιότυπα στοιχείου, μπορείτε να κάνετε τα εξής:
- Περιηγηθείτε και περιηγηθείτε στα σχετικά στοιχεία στο ιεραρχικό δέντρο.
- Κάντε κλικ στο εικονίδιο αποσιωπητικού "Μια λίστα με περισσότερες ενέργειες" για κάθε στοιχείο για να εκτελέσει διαφορετικές ενέργειες.
- Κάντε κλικ στο στοιχείο στιγμιότυπου για να προβάλετε το περιεχόμενό του.
- Προβάλετε το Πεδίο δυναμικής διαδρομής για να δείτε τη διαδρομή από το επιλεγμένο στοιχείο στη ρίζα.
Σημείωμα
Η δυνατότητα στιγμιότυπων σημειωματάριου αυτήν τη στιγμή δεν υποστηρίζει σημειωματάρια που βρίσκονται σε κατάσταση εκτέλεσης ή σε μια περίοδο λειτουργίας Spark υψηλής ταυτόχρονης εκτέλεσης.
Διαγνωστικά
Ο πίνακας διαγνωστικών παρέχει στους χρήστες προτάσεις και ανάλυση σφαλμάτων σε πραγματικό χρόνο, οι οποίες δημιουργούνται από το Spark Advisor μέσω μιας ανάλυσης του κώδικα του χρήστη. Με τα ενσωματωμένα μοτίβα, το Apache Spark Advisor βοηθά τους χρήστες να αποφεύγουν συνηθισμένα λάθη και αναλύει αποτυχίες για τον προσδιορισμό της βασικής αιτίας.
Σχετικό περιεχόμενο
Το επόμενο βήμα μετά την προβολή των λεπτομερειών μιας εφαρμογής Apache Spark είναι να προβάλετε την πρόοδο της εργασίας Spark κάτω από το κελί του σημειωματάριου. Μπορείτε να αναφερθείτε στα εξής: