Τι είναι ένα lakehouse στο Microsoft Fabric;

Το Microsoft Fabric Lakehouse είναι μια πλατφόρμα αρχιτεκτονικής δεδομένων για την αποθήκευση, τη διαχείριση και την ανάλυση δομημένων και μη δομημένων δεδομένων σε μία μόνο θέση. Είναι μια ευέλικτη λύση με δυνατότητα κλιμάκωσης που επιτρέπει στους οργανισμούς να χειρίζονται μεγάλους όγκους δεδομένων χρησιμοποιώντας διάφορα εργαλεία και πλαίσια για την επεξεργασία και ανάλυση αυτών των δεδομένων. Ενοποιείται με άλλα εργαλεία διαχείρισης και ανάλυσης δεδομένων για την παροχή μιας ολοκληρωμένης λύσης για τη διαχείριση και ανάλυση δεδομένων. Ένα lakehouse συνδυάζει την κλιμάκωση μιας λίμνης δεδομένων με την απόδοση και τη δομή μιας αποθήκης δεδομένων, παρέχοντας μια ενοποιημένη πλατφόρμα για αποθήκευση, διαχείριση και ανάλυση δεδομένων.

Τελικό σημείο ανάλυσης SQL Lakehouse

Το Lakehouse δημιουργεί ένα επίπεδο εξυπηρέτησης δημιουργώντας αυτόματα ένα τελικό σημείο ανάλυσης SQL και ένα προεπιλεγμένο μοντέλο σημασιολογίας κατά τη δημιουργία. Αυτή η νέα λειτουργία see-through επιτρέπει στον χρήστη να εργάζεται απευθείας πάνω από τους πίνακες Delta στη λίμνη για να παρέχει μια εμπειρία χωρίς τριβές και αποδοτικής λειτουργίας από την πρόσληψη δεδομένων έως την αναφορά.

Είναι σημαντικό να έχετε υπόψη ότι το τελικό σημείο ανάλυσης SQL είναι μια εμπειρία μόνο για ανάγνωση και δεν υποστηρίζει την πλήρη περιοχή επιφάνειας T-SQL μιας αποθήκης δεδομένων συναλλαγών.

Σημείωση

Μόνο οι πίνακες σε μορφή Delta είναι διαθέσιμοι στο τελικό σημείο ανάλυσης SQL. Δεν είναι δυνατή η ανάθεση ερωτημάτων σε parquet, CSV και άλλες μορφές χρησιμοποιώντας το τελικό σημείο ανάλυσης SQL. Εάν δεν βλέπετε τον πίνακά σας, θα χρειαστεί να τον μετατρέψετε σε μορφή Delta.

Αυτόματος εντοπισμός και καταχώρηση πίνακα

Ο αυτόματος εντοπισμός και εγγραφή πίνακα είναι μια δυνατότητα του Lakehouse που παρέχει ένα πλήρως διαχειριζόμενο αρχείο στην εμπειρία πίνακα για μηχανικούς δεδομένων και επιστήμονες δεδομένων. Μπορείτε να αποθέσετε ένα αρχείο στη διαχειριζόμενη περιοχή του Lakehouse και το σύστημα το επικυρώνει αυτόματα για υποστηριζόμενες δομημένες μορφές και το καταχωρεί στο μεταστάσιο με τα απαραίτητα μετα-δεδομένα, όπως ονόματα στηλών, μορφές, συμπίεση και πολλά άλλα. (Προς το παρόν, η μόνη υποστηριζόμενη μορφή είναι ο πίνακας Delta.) Στη συνέχεια, μπορείτε να αναφέρετε το αρχείο ως πίνακα και να χρησιμοποιήσετε τη σύνταξη SparkSQL για να αλληλεπιδράσετε με τα δεδομένα.

Αλληλεπίδραση με το στοιχείο Lakehouse

Ένας μηχανικός δεδομένων μπορεί να αλληλεπιδράσει με τη λίμνη και τα δεδομένα εντός της λίμνης με διάφορους τρόπους:

• εξερεύνησης lakehouse: Η εξερεύνηση είναι η κύρια σελίδα αλληλεπίδρασης Lakehouse. Μπορείτε να φορτώσετε δεδομένα στο Lakehouse σας, να εξερευνήσετε δεδομένα στο Lakehouse χρησιμοποιώντας την εξερεύνηση αντικειμένων, να ορίσετε ετικέτες MIP & διάφορα άλλα πράγματα. Μάθετε περισσότερα σχετικά με την εμπειρία εξερεύνησης: Navigate στην εξερεύνηση του Fabric Lakehouse.

• Notebooks: Οι μηχανικοί δεδομένων μπορούν να χρησιμοποιήσουν το σημειωματάριο για να γράψουν κώδικα για ανάγνωση, μετασχηματισμό και εγγραφή απευθείας στο Lakehouse ως πίνακες ή/και φάκελοι. Μπορείτε να μάθετε περισσότερα σχετικά με τον τρόπο χρήσης σημειωματάριων για το Lakehouse: Εξερεύνηση των δεδομένων στο lakehouse με ένα σημειωματάριο και Τρόπος χρήσης ενός σημειωματάριου για τη φόρτωση δεδομένων στο lakehouseσας .

• Pipelines: Οι μηχανικοί δεδομένων μπορούν να χρησιμοποιήσουν εργαλεία ενοποίησης δεδομένων, όπως το εργαλείο αντιγραφής διοχέτευσης, για να αντλούν δεδομένα από άλλες προελεύσεις και να προσγειώνονται στο Lakehouse. Βρείτε περισσότερες πληροφορίες σχετικά με τον τρόπο χρήσης της δραστηριότητας αντιγραφής: Τρόπος αντιγραφής δεδομένων με χρήση αντιγραφής δραστηριότητας.

• ορισμοί εργασίας Apache Spark: Οι μηχανικοί δεδομένων μπορούν να αναπτύξουν ισχυρές εφαρμογές και να οργανώσουν την εκτέλεση των μεταγλωττισμένων εργασιών Spark σε Java, Scala και Python. Μάθετε περισσότερα σχετικά με τις εργασίες Spark: Τι είναι ο ορισμός εργασίας Apache Spark;

• Dataflows Gen 2: Οι μηχανικοί δεδομένων μπορούν να χρησιμοποιήσουν το Dataflows Gen 2 για την πρόσληψη και προετοιμασία των δεδομένων τους. Βρείτε περισσότερες πληροφορίες σχετικά με τη φόρτωση δεδομένων με χρήση ροών δεδομένων: Δημιουργήστε την πρώτη ροή δεδομένων σας για να λάβετε και να μετασχηματίστε δεδομένα.

Μάθετε περισσότερα σχετικά με τους διαφορετικούς τρόπους φόρτωσης δεδομένων στο lakehouse σας: Επιλογές για τη λήψη δεδομένων στοFabric Lakehouse .

Πολλαπλές εργασίες με lakehouse

Η εμπειρία πολλαπλών εργασιών παρέχει μια σχεδίαση καρτέλας προγράμματος περιήγησης που σας επιτρέπει να ανοίγετε και να εναλλάσσεστε μεταξύ πολλών στοιχείων απρόσκοπτα, επιτρέποντάς σας να διαχειρίζεστε την αποθήκη δεδομένων σας πιο αποτελεσματικά από ποτέ. Όχι άλλα ταχυδακτυλουργίες μεταξύ διαφορετικών παραθύρων ή απώλεια παρακολούθησης των εργασιών σας. Το Lakehouse παρέχει μια βελτιωμένη εμπειρία πολλαπλών εργασιών για να κάνετε το ταξίδι σας στη διαχείριση δεδομένων όσο το δυνατόν πιο αποδοτικό και φιλικό προς τον χρήστη, με τις ακόλουθες δυνατότητες:

• Διατήρηση εκτελέσεων λειτουργιών: Μπορείτε να αποστείλετε ή να εκτελέσετε τη λειτουργία φόρτωσης δεδομένων σε μία καρτέλα και να ελέγξετε μια άλλη εργασία σε διαφορετική καρτέλα. Με τις βελτιωμένες πολλαπλές εργασίες, οι λειτουργίες που εκτελούνται δεν ακυρώνονται κατά την περιήγηση μεταξύ καρτελών. Μπορείτε να εστιάσετε στην εργασία σας χωρίς διακοπές.

• Διατηρήστε το περιβάλλον σας: Επιλεγμένα αντικείμενα, πίνακες δεδομένων ή αρχεία παραμένουν ανοιχτά και άμεσα διαθέσιμα κατά την εναλλαγή μεταξύ καρτελών. Το περιβάλλον του data lakehouse είναι πάντα στη διάθεσή σας.

• επαναφόρτωση λίστας χωρίς αποκλεισμό: έναν μηχανισμό επαναφόρτωσης που δεν εμποδίζει τη φόρτωση για τα αρχεία και τους πίνακες σας. Μπορείτε να συνεχίσετε να εργάζεστε ενώ η λίστα ανανεώνεται στο παρασκήνιο. Εξασφαλίζει ότι έχετε τα πιο πρόσφατα δεδομένα, παρέχοντάς σας παράλληλα μια ομαλή και αδιάκοπη εμπειρία.

• σαφώς καθορισμένες ειδοποιήσεις: Οι αναδυόμενες ειδοποιήσεις καθορίζουν από ποιο lakehouse προέρχονται, διευκολύνοντας την παρακολούθηση αλλαγών και ενημερώσεων στο περιβάλλον πολλαπλών εργασιών.

Προσβάσιμη σχεδίαση lakehouse

Η προσβασιμότητα ήταν πάντα μια κορυφαία προτεραιότητα για να διασφαλιστεί ότι το Lakehouse είναι περιεκτικό και φιλικό προς τον χρήστη για όλους. Ακολουθούν οι βασικές πρωτοβουλίες που έχουμε υλοποιήσει μέχρι στιγμής για την υποστήριξη της προσβασιμότητας:

• Συμβατότητα αναγνώστη οθόνης: Μπορείτε να εργαστείτε απρόσκοπτα με δημοφιλή προγράμματα ανάγνωσης οθόνης, επιτρέποντας στους χρήστες με προβλήματα όρασης να περιηγούνται και να αλληλεπιδρούν αποτελεσματικά με την πλατφόρμα μας.

• ροή κειμένου Δυναμική σχεδίαση που προσαρμόζεται σε διαφορετικά μεγέθη και προσανατολισμούς οθόνης. Δυναμική ροή κειμένου και περιεχομένου, διευκολύνοντας τους χρήστες να προβάλλουν και να αλληλεπιδρούν με την εφαρμογή μας σε διάφορες συσκευές.

• περιήγηση με το πληκτρολόγιο: βελτιωμένη περιήγηση με το πληκτρολόγιο για να επιτρέπεται στους χρήστες να μετακινούνται μέσω του lakehouse χωρίς να βασίζονται σε ποντίκι, βελτιώνοντας την εμπειρία για άτομα με κινητικές αναπηρίες.

• Εναλλακτικό κείμενο για εικόνες: Όλες οι εικόνες περιλαμβάνουν τώρα ένα περιγραφικό εναλλακτικό κείμενο, το οποίο επιτρέπει στα προγράμματα ανάγνωσης οθόνης να μεταφέρουν σημαντικές πληροφορίες.

• πεδία φόρμας και ετικέτες: Όλα τα πεδία φόρμας έχουν συσχετισμένες ετικέτες, απλοποιώντας την εισαγωγή δεδομένων για όλους τους χρήστες, συμπεριλαμβανομένων εκείνων που χρησιμοποιούν προγράμματα ανάγνωσης οθόνης.

Σχετικό περιεχόμενο

Σε αυτή την επισκόπηση, έχετε μια βασική κατανόηση ενός lakehouse. Προχωρήστε στο επόμενο άρθρο για να μάθετε πώς μπορείτε να δημιουργήσετε και να χρησιμοποιήσετε το δικό σας lakehouse:

• Για να αρχίσετε να χρησιμοποιείτε lakehouses, ανατρέξτε στο θέμα Δημιουργία lakehouse στο Microsoft Fabric.