Κοινή χρήση μέσω


Μετεγκατάσταση από Azure Synapse Spark σε Fabric

Προτού ξεκινήσετε τη μετεγκατάστασή σας, θα πρέπει να επαληθεύσετε ότι η Μηχανική δεδομένων Fabric είναι η καλύτερη λύση για τον φόρτο εργασίας σας. Η Μηχανική δεδομένων Fabric υποστηρίζει lakehouse, σημειωματάριο, περιβάλλον, ορισμό εργασίας Spark (SJD) και στοιχεία διοχέτευσης δεδομένων, συμπεριλαμβανομένων διαφορετικών δυνατοτήτων χρόνου εκτέλεσης και Spark.

Βασικά ζητήματα

Το αρχικό βήμα στη διαμόρφωση μιας στρατηγικής μετεγκατάστασης είναι η αξιολόγηση της καταλληλότητας. Αξίζει να σημειωθεί ότι ορισμένες δυνατότητες Fabric που σχετίζονται με το Spark βρίσκονται επί του παρόντος σε ανάπτυξη ή σχεδιασμό. Για περισσότερες λεπτομέρειες και ενημερώσεις, επισκεφθείτε τη στρατηγική Fabric.

Για το Spark, ανατρέξτε σε λεπτομερείς διαφορές σύγκρισης μεταξύ των Azure Synapse Spark και Fabric.

Σενάρια μετεγκατάστασης

Εάν διαπιστώσετε ότι η Διαχείριση δεδομένων Fabric είναι η σωστή επιλογή για τη μετεγκατάσταση των υπαρχόντων φόρτων εργασίας Spark, η διαδικασία μετεγκατάστασης μπορεί να περιλαμβάνει πολλά σενάρια και φάσεις:

  • Στοιχεία: Η μετεγκατάσταση στοιχείων περιλαμβάνει τη μεταφορά ενός ή διαφόρων στοιχείων από τον υπάρχοντα χώρο εργασίας σας Azure Synapse στο Fabric. Μάθετε περισσότερα σχετικά με τη μετεγκατάσταση συγκέντρωσης Spark, ρυθμίσεων παραμέτρων Spark, βιβλιοθηκών Spark, σημειωματάριων και ορισμού εργασίας Spark.
  • Δεδομένα και διοχετεύσεις: Χρησιμοποιώντας συντομεύσεις OneLake, μπορείτε να κάνετε διαθέσιμα δεδομένα ADLS Gen2 (που συνδέονται με έναν χώρο εργασίας Azure Synapse) στο Fabric Lakehouse. Η μετεγκατάσταση διοχέτευσης περιλαμβάνει τη μετακίνηση υπαρχουσών διοχετεύσεων δεδομένων στο Fabric, συμπεριλαμβανομένων των δραστηριοτήτων διοχέτευσης ορισμού εργασίας σημειωματάριου και Spark. Μάθετε περισσότερα σχετικά με τη μετεγκατάσταση δεδομένων και διοχετεύσεων.
  • Μετα-δεδομένα: Η μετεγκατάσταση μετα-δεδομένων περιλαμβάνει τη μετακίνηση μετα-δεδομένων καταλόγου Spark (βάσεις δεδομένων, πίνακες και διαμερίσματα) από ένα υπάρχον Hive MetaStore (HMS) στο Azure Synapse στο Fabric lakehouse. Μάθετε περισσότερα σχετικά με τη μετεγκατάσταση μετα-δεδομένων HMS.
  • Χώρος εργασίας: Οι χρήστες μπορούν να μετεγκαταστήσουν έναν υπάρχοντα χώρο εργασίας Azure Synapse δημιουργώντας έναν νέο χώρο εργασίας στο Microsoft Fabric, συμπεριλαμβανομένων των μετα-δεδομένων. Η μετεγκατάσταση χώρου εργασίας δεν καλύπτεται σε αυτές τις οδηγίες, με την υπόθεση ότι οι χρήστες πρέπει να δημιουργήσουν έναν νέο χώρο εργασίας ή να έχουν έναν υπάρχοντα χώρο εργασίας Fabric. Μάθετε περισσότερα σχετικά με τους ρόλους χώρου εργασίας στο Fabric.

Στιγμιότυπο οθόνης που εμφανίζει τα σενάρια μετεγκατάστασης.

Η μετάβαση από το Azure Synapse Spark στο Fabric Spark απαιτεί μια βαθιά κατανόηση της τρέχουσας αρχιτεκτονικής σας και των διαφορών μεταξύ των Azure Synapse Spark και Fabric. Το πρώτο κρίσιμο βήμα είναι μια αξιολόγηση, ακολουθούμενη από τη δημιουργία ενός λεπτομερούς σχεδίου μετεγκατάστασης. Αυτό το πρόγραμμα μπορεί να προσαρμοστεί ώστε να ταιριάζει με τα μοναδικά χαρακτηριστικά, τις εξαρτήσεις φάσης και τις πολυπλοκότητες φόρτου εργασίας του συστήματός σας.