Τι είναι το Κατοπτρικό στο Fabric;
Το κατοπτρικό καθρέπτη στο Fabric είναι μια λύση χαμηλού κόστους και χαμηλού λανθάνοντος χρόνου για τη μεταφορά δεδομένων από διάφορα συστήματα σε μια ενιαία πλατφόρμα ανάλυσης. Μπορείτε να αναπαραγάγετε συνεχώς το υπάρχον σύνολο δεδομένων σας απευθείας στο OneLake του Fabric από μια ποικιλία βάσεων δεδομένων Azure και εξωτερικών προελεύσεων δεδομένων.
Με τα πιο ενημερωμένα δεδομένα σε μια μορφή με δυνατότητα ερωτημάτων στο OneLake, μπορείτε πλέον να χρησιμοποιήσετε όλες τις διαφορετικές υπηρεσίες στο Fabric, όπως η εκτέλεση ανάλυσης με το Spark, η εκτέλεση σημειωματάριων, η μηχανική δεδομένων, η απεικόνιση μέσω αναφορών Power BI και πολλά άλλα.
Το κατοπτρικό στο Fabric επιτρέπει στους χρήστες να απολαμβάνουν ένα ιδιαίτερα ενσωματωμένο, ολοκληρωμένο και εύχρηστο προϊόν που έχει σχεδιαστεί για να απλοποιήσει τις ανάγκες ανάλυσής σας. Σχεδιασμένο για άνοιγμα και συνεργασία μεταξύ της Microsoft και τεχνολογικών λύσεων που μπορούν να διαβάσουν τη μορφή πίνακα Delta Lake ανοιχτού κώδικα, το Mirroring είναι μια ολοκληρωμένη λύση χαμηλού κόστους και χαμηλού λανθάνοντος χρόνου που σας επιτρέπει να δημιουργήσετε μια αναπαραγωγή των δεδομένων σας στο OneLake, η οποία μπορεί να χρησιμοποιηθεί για όλες τις αναλυτικές ανάγκες σας.
Οι πίνακες Delta μπορούν στη συνέχεια να χρησιμοποιηθούν παντού Fabric, επιτρέποντας στους χρήστες να επιταχύνουν το ταξίδι τους στο Fabric.
Γιατί να χρησιμοποιήσετε κατοπτρικά στο Fabric;
Σήμερα, πολλοί οργανισμοί έχουν κρίσιμα επιχειρησιακά ή αναλυτικά δεδομένα που βρίσκονται σε σιλό.
Η πρόσβαση και εργασία με αυτά τα δεδομένα σήμερα απαιτεί σύνθετες διοχετεύσεις ETL (Εξαγωγή μετασχηματισμού φόρτωσης), επιχειρηματικές διαδικασίες και σιλό αποφάσεων, δημιουργώντας:
- Περιορισμένη και περιορισμένη πρόσβαση σε σημαντικά, διαρκώς μεταβαλλόμενα δεδομένα
- Τριβές μεταξύ ανθρώπων, διαδικασιών και τεχνολογίας
- Μεγάλοι χρόνοι αναμονής για τη δημιουργία διοχετεύσεων δεδομένων και διαδικασιών για κρίσιμα σημαντικά δεδομένα
- Δεν υπάρχει ελευθερία να χρησιμοποιείτε τα εργαλεία που χρειάζεστε για να αναλύετε και να μοιράζεστε δεδομενικές πληροφορίες εύκολα
- Έλλειψη κατάλληλης βάσης για την κοινή χρήση και συνεργασία σε δεδομένα
- Δεν υπάρχουν συνήθεις, ανοικτές μορφές δεδομένων για όλα τα σενάρια ανάλυσης - BI, AI, ενοποίηση, μηχανική και ακόμη και εφαρμογές
Το Mirroring in Fabric παρέχει μια εύκολη εμπειρία για να επιταχύνετε τον χρόνο προς αξία για πληροφορίες και αποφάσεις καθώς και να αναλύσετε σιλό δεδομένων μεταξύ τεχνολογικών λύσεων:
- Αναπαραγωγή δεδομένων και μετα-δεδομένων σε λίμνη δεδομένων SaaS σχεδόν σε πραγματικό χρόνο, με ενσωματωμένη ανάλυση για BI και AI
Η πλατφόρμα Microsoft Fabric βασίζεται στη βάση του Λογισμικού ως υπηρεσίας (SaaS), η οποία αναβαθμίζει την απλότητα και την ενοποίηση σε ένα εντελώς νέο επίπεδο. Για να μάθετε περισσότερα σχετικά με το Microsoft Fabric, ανατρέξτε στο θέμα Τι είναι το Microsoft Fabric;
Η δημιουργία κατοπτρισμού δημιουργεί τρία στοιχεία στον χώρο εργασίας fabric σας:
- Ο καθρέπτης διαχειρίζεται την αναπαραγωγή των δεδομένων και των μετα-δεδομένων σε OneLake και τη μετατροπή σε Parquet, σε μορφή έτοιμη για ανάλυση. Αυτό επιτρέπει σενάρια κατάντη, όπως η μηχανική δεδομένων, η επιστήμη δεδομένων και πολλά άλλα.
- Ένα τελικό σημείο ανάλυσης SQL
- Ένα προεπιλεγμένο σημασιολογικό μοντέλο
Εκτός από το πρόγραμμα επεξεργασίας ερωτημάτων SQL, υπάρχει ένα ευρύ οικοσύστημα εργαλείων, όπως το SQL Server Management Studio (SSMS), η επέκταση mssql με Κώδικα Visual Studio, ακόμη και το GitHub Copilot.
Η κοινή χρήση επιτρέπει την ευκολία ελέγχου και διαχείρισης της πρόσβασης, για να βεβαιωθείτε ότι μπορείτε να ελέγχετε την πρόσβαση σε ευαίσθητες πληροφορίες. Η κοινή χρήση επιτρέπει επίσης την ασφαλή και δημοκρατική λήψη αποφάσεων σε ολόκληρο τον οργανισμό σας.
Τύποι κατοπτρισμού
Το Fabric προσφέρει τρεις διαφορετικές προσεγγίσεις για την εισαγωγή δεδομένων στο OneLake μέσω κατοπτρισμού.
- Κατοπτρικά βάσης δεδομένων – Η κατοπτρική βάση δεδομένων στο Microsoft Fabric επιτρέπει την αναπαραγωγή ολόκληρων βάσεων δεδομένων και πινάκων, επιτρέποντάς σας να συγκεντρώσετε δεδομένα από διάφορα συστήματα σε μια ενιαία πλατφόρμα ανάλυσης.
- Κατοπτρικά μετα-δεδομένα – Τα μετα-δεδομένα που αντικατοπτρίζονται στο Fabric συγχρονίζουν μετα-δεδομένα (όπως ονόματα καταλόγου, σχήματα και πίνακες) αντί να μετακινούν τα δεδομένα. Αυτή η προσέγγιση αξιοποιεί τις συντομεύσεις, εξασφαλίζοντας ότι τα δεδομένα παραμένουν στην προέλευσή τους, ενώ παραμένουν εύκολα προσβάσιμα εντός του Fabric.
- Άνοιγμα κατοπτρισμού – Ανοίξτε κατοπτρικά στο Fabric έχει σχεδιαστεί για να επεκτείνει κατοπτρικά με βάση την ανοικτή μορφή πίνακα Delta Lake. Αυτή η δυνατότητα επιτρέπει σε οποιονδήποτε προγραμματιστή να γράψει τα δεδομένα αλλαγής της εφαρμογής του απευθείας σε ένα κατοπτρικό στοιχείο βάσης δεδομένων στο Microsoft Fabric, με βάση την ανοιχτή προσέγγιση κατοπτρισμού και τα δημόσια API.
Προς το παρόν, είναι διαθέσιμες οι παρακάτω εξωτερικές βάσεις δεδομένων:
Πώς λειτουργεί η αναπαραγωγή της βάσης δεδομένων σχεδόν σε πραγματικό χρόνο;
Το κατοπτρικό αντίγραφο ενεργοποιείται με τη δημιουργία μιας ασφαλούς σύνδεσης στην προέλευση δεδομένων σας. Επιλέξτε αν θα κάνετε αναπαραγωγή μιας ολόκληρης βάσης δεδομένων ή μεμονωμένων πινάκων και το Mirroring θα διατηρήσει αυτόματα συγχρονισμένα τα δεδομένα σας. Μετά τη ρύθμιση, τα δεδομένα θα αναπαράγονται συνεχώς στο OneLake για κατανάλωση ανάλυσης.
Τα παρακάτω είναι βασικά σύνολα του Mirroring:
Η ενεργοποίηση του Mirroring στο Fabric είναι απλή και εύχρηστη, χωρίς να χρειάζεται να δημιουργήσετε σύνθετες διοχετεύσεις ETL, να εκχωρήσετε άλλους υπολογιστικούς πόρους και να διαχειριστείτε τη μετακίνηση δεδομένων.
Το Mirroring in Fabric είναι μια πλήρως διαχειριζόμενη υπηρεσία, επομένως δεν χρειάζεται να ανησυχείτε για τη φιλοξενία, τη συντήρηση ή τη διαχείριση της αναπαραγωγής της κατοπτρικής σύνδεσης.
Πώς λειτουργεί ο κατοπτρικός πίνακας μετα-δεδομένων;
Ο αντικατοπτρισμός όχι μόνο επιτρέπει την αναπαραγωγή δεδομένων, αλλά μπορεί επίσης να επιτευχθεί μέσω συντομεύσεων ή μετα-δεδομένων που κατοπτρίζουν αντί για πλήρη αναπαραγωγή δεδομένων, επιτρέποντας στα δεδομένα να είναι διαθέσιμα χωρίς φυσική μετακίνηση ή αναπαραγωγή τους. Η απεικόνιση κατοπτρισμού σε αυτό το περιβάλλον αναφέρεται στην αναπαραγωγή μόνο μετα-δεδομένων, όπως ονόματα καταλόγου, σχήματα και πίνακες, και όχι στα ίδια τα δεδομένα. Αυτή η προσέγγιση επιτρέπει στο Fabric να κάνει τα δεδομένα από διαφορετικές προελεύσεις προσβάσιμα χωρίς να τα αναπαράγει, απλοποιώντας τη διαχείριση δεδομένων και ελαχιστοποιώντας τις ανάγκες αποθήκευσης.
Για παράδειγμα, κατά την πρόσβαση σε δεδομένα που έχουν καταχωρηθεί στον κατάλογο Unity, το Fabric κατοπτρίζει μόνο τη δομή καταλόγου από το Azure Databricks, επιτρέποντας την πρόσβαση στα υποκείμενα δεδομένα μέσω συντομεύσεων. Αυτή η μέθοδος εξασφαλίζει ότι οποιεσδήποτε αλλαγές στα δεδομένα προέλευσης αντικατοπτρίζονται αμέσως στο Fabric χωρίς να απαιτείται μετακίνηση δεδομένων, διατήρηση του συγχρονισμού σε πραγματικό χρόνο και βελτίωση της αποτελεσματικότητας στην πρόσβαση σε ενημερωμένες πληροφορίες.
Πώς λειτουργεί το άνοιγμα κατοπτρισμού;
Εκτός από τον κατοπτρικό τρόπο ενεργοποίησης της αναπαραγωγής δεδομένων με τη δημιουργία μιας ασφαλούς σύνδεσης με την προέλευση δεδομένων σας, μπορείτε επίσης να επιλέξετε μια υπάρχουσα υπηρεσία παροχής δεδομένων ή να συντάξετε τη δική σας εφαρμογή για να μεταφέρετε δεδομένα σε βάση δεδομένων κατοπτρισμού. Μόλις δημιουργήσετε μια ανοιχτή βάση δεδομένων κατοπτρισμού μέσω δημόσιου API ή μέσω της πύλης Fabric, θα μπορείτε να λάβετε μια διεύθυνση URL ζώνης προορισμού στο OneLake, όπου μπορείτε να μεταβείτε σε δεδομένα αλλαγής σύμφωνα με ανοιχτές προδιαγραφές κατοπτρισμού.
Όταν τα δεδομένα βρίσκονται στη ζώνη προορισμού με την κατάλληλη μορφή, η αναπαραγωγή θα αρχίσει να εκτελείται και θα διαχειρίζεται την πολυπλοκότητα της συγχώνευσης των αλλαγών με ενημερώσεις, εισαγωγή και διαγραφή για να αντικατοπτριστούν στους πίνακες δέλτα. Αυτή η μέθοδος εξασφαλίζει ότι οποιαδήποτε δεδομένα είναι γραμμένα στη ζώνη προορισμού θα είναι αμέσως και θα διατηρούν τα δεδομένα στο Fabric ενημερωμένα.
Κοινή χρήση
Η κοινή χρήση επιτρέπει την ευκολία ελέγχου και διαχείρισης της πρόσβασης, ενώ τα στοιχεία ελέγχου ασφαλείας, όπως η ασφάλεια σε επίπεδο γραμμών (RLS) και η ασφάλεια σε επίπεδο αντικειμένου (OLS), καθώς και άλλα, εξασφαλίζουν ότι μπορείτε να ελέγχετε την πρόσβαση σε ευαίσθητες πληροφορίες. Η κοινή χρήση επιτρέπει επίσης την ασφαλή και δημοκρατική λήψη αποφάσεων σε ολόκληρο τον οργανισμό σας.
Με την κοινή χρήση, οι χρήστες εκχωρούν σε άλλους χρήστες ή σε μια ομάδα χρηστών πρόσβαση σε μια κατοπτρισμένη βάση δεδομένων χωρίς να παρέχουν πρόσβαση στον χώρο εργασίας και στα υπόλοιπα στοιχεία του. Όταν κάποιος χρήστης θέτει σε κοινή χρήση μια βάση δεδομένων κατοπτρισμού, εκχωρεί επίσης πρόσβαση στο τελικό σημείο ανάλυσης SQL και στο συσχετισμένο προεπιλεγμένο μοντέλο σημασιολογίας.
Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Κοινή χρήση της βάσης δεδομένων κατοπτρισμού σας και διαχείριση δικαιωμάτων.
Ερωτήματα μεταξύ βάσεων δεδομένων
Με τα δεδομένα από τη βάση δεδομένων κατοπτρισμού αποθηκευμένα στο OneLake, μπορείτε να συντάξετε ερωτήματα μεταξύ βάσεων δεδομένων, να ενώσετε δεδομένα από βάσεις δεδομένων κατοπτρισμού, αποθήκες και τελικά σημεία ανάλυσης SQL του Lakehouses σε ένα μόνο ερώτημα T-SQL. Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Εγγραφή ερωτήματος μεταξύ βάσεων δεδομένων.
Για παράδειγμα, μπορείτε να αναφέρετε τον πίνακα από βάσεις δεδομένων και αποθήκες κατοπτρισμού, χρησιμοποιώντας ονοματοδοσία τριών τμημάτων. Στο παρακάτω παράδειγμα, χρησιμοποιήστε το όνομα τριών μερών για να ContosoSalesTable αναφερθείτε στην αποθήκη ContosoWarehouse. Από άλλες βάσεις δεδομένων ή αποθήκες, το πρώτο μέρος της τυπικής σύμβασης ονοματοθεσιών τριών τμημάτων SQL είναι το όνομα της βάσης δεδομένων κατοπτρισμού.
SELECT *
FROM ContosoWarehouse.dbo.ContosoSalesTable AS Contoso
INNER JOIN Affiliation
ON Affiliation.AffiliationId = Contoso.RecordTypeID;
Διαχείριση δεδομένων με τα δεδομένα της βάσης δεδομένων κατοπτρισμού σας
Το Microsoft Fabric παρέχει διάφορες δυνατότητες διαχείρισης δεδομένων για να εξασφαλίσει ότι τα δεδομένα σας είναι εύκολα προσβάσιμα, καλά οργανωμένα και υψηλής ποιότητας. Από τη Μηχανική δεδομένων Fabric, μπορείτε να κάνετε τα εξής:
- Δημιουργία και διαχείριση των δεδομένων σας ως Spark χρησιμοποιώντας ένα lakehouse
- Σχεδίαση διοχετεύσεων για αντιγραφή δεδομένων στο lakehouse σας
- Χρησιμοποιήστε ορισμούς εργασιών Spark για την υποβολή εργασίας δέσμης/ροής στο σύμπλεγμα Spark
- Χρήση σημειωματάριων για τη σύνταξη κώδικα για την πρόσληψη δεδομένων, την προετοιμασία και τον μετασχηματισμό
Επιστήμη δεδομένων με τα δεδομένα βάσης δεδομένων κατοπτρισμού
Το Microsoft Fabric προσφέρει την Επιστήμη δεδομένων Fabric για να παρέχει στους χρήστες τη δυνατότητα να ολοκληρώνουν ολοκληρωμένες ροές εργασιών επιστήμης δεδομένων για τον εμπλουτισμό δεδομένων και επιχειρηματικές πληροφορίες. Μπορείτε να ολοκληρώσετε ένα ευρύ φάσμα δραστηριοτήτων σε ολόκληρη τη διαδικασία επιστήμης δεδομένων, από την εξερεύνηση δεδομένων, την προετοιμασία και τον καθαρισμό έως τον πειραματισμό, τη μοντελοποίηση, τη βαθμολόγηση μοντέλου και την παροχή προγνωστικών πληροφοριών σε αναφορές BI.
Οι χρήστες του Microsoft Fabric έχουν πρόσβαση σε φόρτους εργασίας επιστήμης δεδομένων. Από εκεί, μπορούν να ανακαλύψουν και να αποκτήσουν πρόσβαση σε διάφορους σχετικούς πόρους. Για παράδειγμα, μπορούν να δημιουργήσουν πειράματα εκμάθησης μηχανής, μοντέλα και σημειωματάρια. Μπορούν επίσης να εισαγάγουν υπάρχοντα σημειωματάρια στην αρχική σελίδα της επιστήμης δεδομένων.
Βάση δεδομένων SQL στο Fabric
Μπορείτε επίσης να δημιουργήσετε και να διαχειριστείτε απευθείας μια βάση δεδομένων SQL στο Microsoft Fabric (Προεπισκόπηση) μέσα στην πύλη Fabric. Με βάση τη βάση δεδομένων SQL Azure, η βάση δεδομένων SQL στο Fabric αντικατοπτρίζεται αυτόματα για σκοπούς ανάλυσης και σας επιτρέπει να δημιουργήσετε εύκολα τη λειτουργική βάση δεδομένων σας στο Fabric. Η βάση δεδομένων SQL είναι η αρχική σελίδα σε φόρτους εργασίας Fabric για OLTP και μπορεί να ενοποιήσει με την ενοποίηση ελέγχου προέλευσης του Fabric.