Ουρά εργασιών στο Apache Spark για το Microsoft Fabric
Ισχύει για:✅ Διαχείριση δεδομένων και Επιστήμη δεδομένων στο Microsoft Fabric
Το Microsoft Fabric υποστηρίζει την ουρά των εργασιών παρασκηνίου, όταν έχετε συμπληρώσει τα υπολογιστικά όρια Spark για τους εκχωρημένους πόρους Fabric που διαθέτετε. Το σύστημα ουράς εργασιών προσφέρει αυτόματες επαναλήξεες για εργασίες που προστίθενται στην ουρά μέχρι να λήξει η ουρά. Όταν οι χρήστες δημιουργούν εκχωρημένους πόρους Microsoft Fabric στο Azure, επιλέγουν ένα μέγεθος εκχωρημένων πόρων με βάση το μέγεθος του φόρτου εργασίας ανάλυσής τους. Μετά την αγορά της χωρητικότητας, οι διαχειριστές μπορούν να δημιουργήσουν χώρους εργασίας εντός των εκχωρημένων πόρων στο Microsoft Fabric. Οι εργασίες Spark που εκτελούνται σε αυτούς τους χώρους εργασίας μπορούν να χρησιμοποιήσουν έως και τους μέγιστους πυρήνες που έχουν εκχωρηθεί για ένα συγκεκριμένο σύνολο εκχωρημένων πόρων και, μόλις συμπληρωθεί το μέγιστο όριο, οι εργασίες περιορίζονται ή τοποθετούνται σε ουρά.
Μάθετε περισσότερα σχετικά με τα όρια ταυτόχρονης εκτέλεσης Spark στο Microsoft Fabric
Η τοποθέτηση σε ουρά εργασιών υποστηρίζεται για εργασίες σημειωματάριου που ενεργοποιούνται από διοχετεύσεις ή μέσω του χρονοδιαγράμματος, καθώς και για ορισμούς εργασίας Spark. Η ουρά δεν υποστηρίζεται για εργασίες αλληλεπιδραστικού σημειωματάριου και εργασίες σημειωματάριου που ενεργοποιούνται μέσω του δημόσιου API σημειωματάριου.
Η ουρά λειτουργεί με τρόπο First-In-First-Out (FIFO), όπου οι εργασίες προστίθενται στην ουρά με βάση τη στιγμή της υποβολής τους και επαναληφθεί συνεχώς και αρχίζουν να εκτελούνται όταν οι εκχωρημένοι πόροι απελευθερώνονται.
Σημείωμα
Η τοποθέτηση σε ουρά εργασιών Spark δεν υποστηρίζεται όταν οι εκχωρημένοι πόροι Fabric είναι σε κατάσταση επιτάχυνσης. Όλες οι νέες θέσεις εργασίας που θα υποβληθούν θα απορριφθούν.
Όταν προστεθεί μια εργασία στην ουρά, η κατάστασή της ενημερώνεται σε Δεν ξεκίνησε στο κέντρο παρακολούθησης. Σημειωματάρια και ορισμοί εργασίας Spark όταν επιλέγονται από την ουρά και αρχίζουν να εκτελούνται, η κατάστασή τους ενημερώνεται από Δεν ξεκίνησε σε Σε εξέλιξη.
Σημείωμα
Η λήξη της ουράς είναι 24 ώρες για όλες τις εργασίες από τη στιγμή που εισήχθησαν στην ουρά. Όταν εξαντληθεί η ώρα λήξης, οι εργασίες θα πρέπει να υποβληθούν ξανά.
Μεγέθη ουράς
Το Fabric Spark επιβάλλει μεγέθη ουράς με βάση το μέγεθος SKU εκχωρημένων πόρων που συνδέεται σε έναν χώρο εργασίας, παρέχοντας έναν μηχανισμό περιορισμού και ουράς, όπου οι χρήστες μπορούν να υποβάλουν εργασίες με βάση τις SKU χωρητικότητας Fabric που έχουν αγοραστεί.
Η παρακάτω ενότητα παραθέτει διάφορα μεγέθη ουρών για φόρτους εργασίας Spark με βάση το Microsoft Fabric με βάση τα SKU εκχωρημένων πόρων:
SKU χωρητικότητας fabric | Ισοδύναμο Power BI SKU | Όριο ουράς |
---|---|---|
F2 | - | 4 |
F4 | - | 4 |
F8 | - | 8 |
F16 | - | 16 |
F32 | - | 32 |
F64 | P1 | 64 |
F128 | P2 | 128 |
F256 | P3 | 256 |
F512 | P4 | 512 |
F1024 | - | 1024 |
F2048 | - | 2048 |
Εκχωρημένοι πόροι δοκιμαστικής έκδοσης | P1 | Μη διαθέσιμο |
Σημείωμα
Η ουρά δεν υποστηρίζεται για εκχωρημένους πόρους δοκιμαστικής έκδοσης Fabric. Οι χρήστες θα πρέπει να αλλάξουν σε ένα SKU Επί πληρωμή Fabric F ή P για να χρησιμοποιήσουν την ουρά για εργασίες Spark.
Μόλις συμπληρωθεί το μέγιστο όριο ουράς για εκχωρημένους πόρους Fabric, οι νέες εργασίες που υποβάλλονται θα περιορίζονται με ένα μήνυμα σφάλματος [TooManyRequestsForCapacity] Αυτή η εργασία σπινθήρα δεν μπορεί να εκτελεστεί επειδή έχετε φτάσει σε ένα όριο ρυθμού spark compute ή API. Για να εκτελέσετε αυτή την εργασία σπινθήρα, ακυρώστε μια ενεργή εργασία Spark μέσω του Κέντρου παρακολούθησης, επιλέξτε ένα SKU μεγαλύτερου εκχωρημένων πόρων ή δοκιμάστε ξανά αργότερα. Κωδικός κατάστασης HTTP: 430 {Learn more} Κωδικός κατάστασης HTTP: 430.
Σχετικό περιεχόμενο
- Μάθετε σχετικά με τη χρέωση και τη χρήση για το Spark στο Microsoft Fabric.
- Μάθετε σχετικά με το Spark compute για τη μηχανική δεδομένων Fabric και τις εμπειρίες επιστήμης δεδομένων.