Τιμολόγηση του Dataflow Gen2 για το Data Factory στο Microsoft Fabric
Το Dataflow Gen2 σάς επιτρέπει να αξιοποιήσετε μια διασύνδεση χαμηλού κώδικα με 300+ δεδομένα και μετασχηματισμούς που βασίζονται σε AI, επιτρέποντάς σας να μετασχηματίζετε τα δεδομένα πιο εύκολα και με μεγαλύτερη ευελιξία από οποιοδήποτε άλλο εργαλείο. Το Dataflow Gen2 συντάσσεται χρησιμοποιώντας την οικεία εμπειρία Power Query που είναι διαθέσιμη σήμερα σε πολλά προϊόντα και υπηρεσίες της Microsoft, όπως το Excel, το Power BI, το Power Platform, εφαρμογές Dynamics 365 Insights και πολλά άλλα. Μετά τη δημοσίευση μιας ροής δεδομένων, δημιουργείται ο ορισμός ροής δεδομένων - αυτό είναι το πρόγραμμα που εκτελείται όταν η ροή δεδομένων ανανεώνεται για την παραγωγή πινάκων στον χώρο αποθήκευσης ή/και στον προορισμό εξόδου προεργασίας. Κατά τη διάρκεια της ανανέωσης, ο ορισμός μιας ροής δεδομένων χρησιμοποιείται από τον μηχανισμό ροής δεδομένων για τη δημιουργία ενός σχεδίου ενορχήστρωσης, τη διαχείριση πόρων και την ενορχήστρωση της εκτέλεσης ερωτημάτων σε προελεύσεις δεδομένων, πύλες και μηχανισμούς υπολογιστικής λειτουργίας, καθώς και για τη δημιουργία πινάκων είτε στον χώρο αποθήκευσης προεργασίας είτε στον προορισμό δεδομένων.
Το διάγραμμα που εμφανίζεται εδώ καταγράφει τα διάφορα στοιχεία της αρχιτεκτονικής Data Factory Dataflow Gen2, συμπεριλαμβανομένου του Lakehouse που χρησιμοποιείται για την προετοιμασία των δεδομένων που προσλαμβάνονται και του τεχνουργήματος Warehouse που χρησιμοποιείται ως μηχανή υπολογιστικής λειτουργίας και σημαίνει ταχύτερη εγγραφή των αποτελεσμάτων σε προορισμούς προεργασίας ή υποστηριζόμενης εξόδου. Όταν δεν είναι δυνατή η χρήση της υπολογιστικής λειτουργίας Warehouse ή όταν η προεργασία είναι απενεργοποιημένη για ένα ερώτημα, ο μηχανισμός συνδυασμού δεδομένων θα εξαγάγει, μετασχηματίσει ή φορτώσει τα δεδομένα σε προεργασία ή προορισμούς δεδομένων. Μπορείτε να μάθετε περισσότερα σχετικά με τον τρόπο λειτουργίας του Dataflow Gen2 σε αυτή την καταχώρηση ιστολογίου εδώ: Data Factory Spotlight: Dataflow Gen2.
Όταν ανανεώνετε ή δημοσιεύετε ένα στοιχείο Dataflow Gen2, οι Μονάδες εκχωρημένων πόρων Fabric καταναλώνονται για τους ακόλουθους μηχανισμούς.
- Τυπική υπολογιστική λειτουργία: Χρεώνεται για αυτή με βάση τον χρόνο αξιολόγησης του ερωτήματος σε όλα τα ερωτήματα ροής δεδομένων που εκτελέστηκαν μέσω του μηχανισμού συνδυασμού δεδομένων.
- Υπολογιστική λειτουργία ροών δεδομένων υψηλής κλίμακας: Χρεώνεστε όταν η προεργασία ενεργοποιείται με βάση τον μηχανισμό Lakehouse (Χώρος αποθήκευσης προεργασίας) και τη διάρκεια κατανάλωσης του μηχανισμού SQL Warehouse (Storage Compute).
Μοντέλο τιμολόγησης Dataflow Gen2
Ο παρακάτω πίνακας υποδεικνύει ότι για τον προσδιορισμό του κόστους εκτέλεσης του Dataflow Gen2, κάθε εκτέλεση ερωτήματος χρησιμοποιεί τη μηχανή συνδυασμού δεδομένων για τυπική υπολογιστική λειτουργία και ότι η διάρκεια υπολογιστικής εκτέλεσης μεταφράζεται σε ρυθμό κατανάλωσης 16 CUS ανά ώρα. Δεύτερον, για σενάρια υπολογιστικής λειτουργίας υψηλής κλίμακας όταν είναι ενεργοποιημένη η προεργασία, θα πρέπει επίσης να λαμβάνεται υπόψη η διάρκεια εκτέλεσης του μηχανισμού SQL Lakehouse/Warehouse. Η υπολογιστική διάρκεια εκτέλεσης μεταφράζεται σε ρυθμό κατανάλωσης 6 CUs ανά ώρα. Στο τέλος κάθε εκτέλεσης dataflow Gen2, η κατανάλωση μονάδας εκχωρημένων πόρων (CU) για κάθε τύπο μηχανισμού αθροίζεται και τιμολογείται σύμφωνα με τη μεταφρασμένη τιμή για τους εκχωρημένους πόρους Fabric στην περιοχή όπου έχει αναπτυχθεί.
| Τύπος μηχανισμού Dataflow Gen2 | Μετρητές κατανάλωσης | Ρυθμός κατανάλωσης CU υφάσματος | Υποδιαίρεση αναφοράς κατανάλωσης |
|---|---|---|---|
| Τυπική υπολογιστική λειτουργία | Με βάση κάθε διάρκεια εκτέλεσης ερωτήματος μηχανής συνδυασμού δεδομένων σε δευτερόλεπτα. | 16 CUs ανά ώρα | Ανά στοιχείο Dataflow Gen2 |
| Υπολογιστική λειτουργία ροών δεδομένων υψηλής κλίμακας | Με βάση τη διάρκεια εκτέλεσης του μηχανισμού SQL Lakehouse/Warehouse (με ενεργοποιημένη την προεργασία) σε δευτερόλεπτα. | 6 CUs ανά ώρα | Ανά χώρο εργασίας |
| Μετακίνηση δεδομένων | Με βάση τη διάρκεια εκτέλεσης γρήγορης αντιγραφής σε ώρες και τους χρησιμοποιούμενους ευφυείς πόρους μετάδοσης βελτιστοποίησης. | 1,5 CUs ανά ώρα | Ανά στοιχείο Dataflow Gen2 |
Τιμολόγηση της πύλης δεδομένων εικονικού δικτύου με το Dataflow Gen2
Η πύλη δεδομένων εικονικού δικτύου (VNET) τιμολογείται ως πρόσθετη χρέωση υποδομής, που σχετίζεται με εκχωρημένους πόρους Fabric. Αυτό σημαίνει ότι έχει τον δικό του μετρητή και επιβαρύνεται με έναν λογαριασμό που είναι συνεπής σε όλο και επιπλέον σε όλες τις εκτελέσεις στοιχείων Fabric.
Ο συνολικός λογαριασμός για την εκτέλεση ροών δεδομένων Gen2 μέσω της πύλης δεδομένων VNET υπολογίζεται ως: Χρέωση ροών δεδομένων Gen2 + Χρέωση πύλης δεδομένων VNET.
Η χρέωση της πύλης δεδομένων VNET είναι ανάλογη με τη χρήση της πύλης δεδομένων VNET, όπου η χρήση ορίζεται ως χρόνος λειτουργίας, ή όποτε η πύλη δεδομένων VNET είναι ανοιχτή.
Ρυθμός κατανάλωσης CU πύλης δεδομένων VNET: (4 CU-hour) * (Χωρητικότητα fabric ανά τιμή μονάδας)
Μάθετε περισσότερα στο θέμα Τιμολόγηση και χρέωση για τις πύλες δεδομένων εικονικού δικτύου.
Αλλαγές στον ρυθμό κατανάλωσης φόρτου εργασίας Microsoft Fabric
Οι ρυθμοί κατανάλωσης υπόκεινται σε αλλαγές ανά πάσα στιγμή. Η Microsoft καταβάλλει εύλογες προσπάθειες για την παροχή ειδοποίησης μέσω ηλεκτρονικού ταχυδρομείου και ειδοποίησης εντός του προϊόντος. Οι αλλαγές εφαρμόζονται στην ημερομηνία που αναφέρεται στις Σημειώσεις έκδοσης και στο Ιστολόγιο Microsoft Fabric. Εάν οποιαδήποτε αλλαγή στον ρυθμό κατανάλωσης φόρτου εργασίας Microsoft Fabric αυξήσει σημαντικά τις Μονάδες εκχωρημένων πόρων (CU) που απαιτούνται για τη χρήση ενός συγκεκριμένου φόρτου εργασίας, οι πελάτες μπορούν να χρησιμοποιήσουν τις επιλογές ακύρωσης που είναι διαθέσιμες για την επιλεγμένη μέθοδο πληρωμής.
Υπολογιστικό κόστος με χρήση της εφαρμογής Fabric Metrics
Η εφαρμογή Μετρικά εκχωρημένων πόρων Microsoft Fabric παρέχει ορατότητα στη χρήση εκχωρημένων πόρων για όλους τους χώρους εργασίας Fabric που συνδέονται με ένα σύνολο εκχωρημένων πόρων. Χρησιμοποιείται από τους διαχειριστές εκχωρημένων πόρων για την παρακολούθηση της απόδοσης των φόρτων εργασίας και της χρήσης τους σε σύγκριση με τους εκχωρημένους πόρους που έχουν αγοραστεί. Η χρήση της εφαρμογής Μετρικά είναι ο πιο ακριβής τρόπος εκτίμησης του κόστους των εκτελέσεων ανανέωσης Dataflow Gen2. Όταν δοκιμάζετε τη φόρτωση του σεναρίου σας, δημιουργήστε το στοιχείο Dataflow Gen2 σε έναν νέο χώρο εργασίας για να μειώσετε τυχόν αναφερόμενο θόρυβο στην εφαρμογή Fabric Metrics.
Ο παρακάτω πίνακας μπορεί να χρησιμοποιηθεί ως πρότυπο για τον υπολογισμό του εκτιμώμενου κόστους χρησιμοποιώντας την εφαρμογή Fabric Metrics για μια ανανέωση Dataflow Gen2:
| Metric | Τυπική υπολογιστική λειτουργία | Υπολογιστική υψηλής κλίμακας |
|---|---|---|
| Σύνολο CUS | s CU δευτερόλεπτα | h CU δευτερόλεπτα |
| Ισχύει CU-ώρες χρέωσης | s / (60*60) = S CU-hour | h / (60*60) = H CU-hour |
Συνολικό κόστος ανανέωσης = (S + H CU-hour) * (Χωρητικότητα Fabric ανά τιμή μονάδας)