Κοινή χρήση μέσω

Μετεγκατάσταση βιβλιοθηκών Spark από Azure Synapse σε Fabric

  • Άρθρο

Η ομάδα Azure Synapse Spark προσφέρει διαφορετικές επιλογές τροφοδοσίας και προσαρμοσμένης βιβλιοθήκης. Στο Fabric, κάθε χρόνος εκτέλεσης συνοδεύεται από ένα προεγκατεστημένες βιβλιοθήκες (ενσωματωμένες βιβλιοθήκες). Ωστόσο, με βάση τα σενάρια και τις συγκεκριμένες ανάγκες σας, μπορείτε επίσης να συμπεριλάβετε άλλες βιβλιοθήκες που χρησιμοποιούν βιβλιοθήκες περιβάλλοντος και ενσωματωμένες βιβλιοθήκες. Για να μετακινήσετε τις βιβλιοθήκες του χώρου συγκέντρωσης Azure Synapse Spark στο Fabric, χρησιμοποιήστε βιβλιοθήκες περιβάλλοντος.

Για ζητήματα βιβλιοθήκης Spark, ανατρέξτε στις διαφορές μεταξύ των Azure Synapse Spark και Fabric.

Προαπαιτούμενα στοιχεία

  • Εάν δεν έχετε ήδη έναν, δημιουργήστε έναν χώρο εργασίας Fabric στον μισθωτή σας.
  • Εάν δεν έχετε ήδη ένα, δημιουργήστε ένα Περιβάλλον στον χώρο εργασίας σας.

Επιλογή 1: Προσθήκη βιβλιοθηκών Spark σε προσαρμοσμένο περιβάλλον

Μπορείτε να μετακινήσετε βιβλιοθήκες Spark pool σε ένα περιβάλλον ως εξής:

  1. Ανοίξτε το Synapse Studio: Πραγματοποιήστε είσοδο στο Azure. Μεταβείτε στον χώρο εργασίας σας Azure Synapse και ανοίξτε το Synapse Studio.
  2. Εντοπίστε τις βιβλιοθήκες Spark:
    • Μεταβείτε στην επιλογή Διαχείριση περιοχής και επιλέξτε στην περιοχή Χώροι συγκέντρωσης Apache Spark.
    • Βρείτε τον χώρο συγκέντρωσης Apache Spark, επιλέξτε Πακέτα και εντοπίστε τις βιβλιοθήκες Spark για τον χώρο συγκέντρωσης.
  3. Λήψη βιβλιοθηκών Spark: Εντοπίστε τα πακέτα requirements.txt, environment.yml ή χώρου εργασίας που είναι εγκατεστημένα στον χώρο συγκέντρωσης. Λάβετε τη λίστα των εγκατεστημένων βιβλιοθηκών στον χώρο συγκέντρωσης.
  4. Όταν έχετε βιβλιοθήκες Spark, προσθέστε προσαρμοσμένες βιβλιοθήκες Spark σε ένα περιβάλλον στο Fabric. Στο περιβάλλον σας, μεταβείτε στις Βιβλιοθήκες και προσθέστε βιβλιοθήκες:
    • Από τις δημόσιες βιβλιοθήκες, μπορείτε να αποστείλετε ένα αρχείο .yml. Μπορείτε επίσης να εγκαταστήσετε βιβλιοθήκες χρησιμοποιώντας το PyPI και το Conda.
    • Από τις προσαρμοσμένες βιβλιοθήκες, μπορείτε να εγκαταστήσετε βιβλιοθήκες χρησιμοποιώντας αρχεία .jar/.whl/.tar.gz.
  5. Κάντε κλικ στην επιλογή Αποθήκευση και δημοσίευση αλλαγών.

Στιγμιότυπο οθόνης που εμφανίζει βιβλιοθήκες Spark.

Μάθετε περισσότερα σχετικά με την προσθήκη βιβλιοθηκών Spark σε ένα περιβάλλον.

Σημείωμα

Σημειώστε ότι η εγκατάσταση της βιβλιοθήκης ενδέχεται να διαρκέσει αρκετή ώρα.

Σχετικό περιεχόμενο