Κοινή χρήση μέσω

Μετεγκατάσταση διαμορφώσεων Spark από το Azure Synapse Analytics στο Fabric

  • Άρθρο

Το Apache Spark παρέχει πολλές ρυθμίσεις παραμέτρων που μπορούν να προσαρμοστούν για να βελτιώσουν την εμπειρία σε διάφορα σενάρια. Στο Azure Synapse Spark και τη Μηχανική δεδομένων Fabric, έχετε την ευελιξία να ενσωματώσετε αυτές τις ρυθμίσεις παραμέτρων ή ιδιότητες για να προσαρμόσετε την εμπειρία σας. Στο Fabric, μπορείτε να προσθέσετε διαμορφώσεις Spark σε ένα περιβάλλον και να χρησιμοποιήσετε ενσωματωμένες ιδιότητες Spark απευθείας μέσα από τις εργασίες Spark. Για να μετακινήσετε τις ρυθμίσεις παραμέτρων του χώρου συγκέντρωσης Azure Synapse Spark στο Fabric, χρησιμοποιήστε ένα περιβάλλον.

Για ζητήματα ρύθμισης παραμέτρων Spark, ανατρέξτε στις διαφορές μεταξύ των Azure Synapse Spark και Fabric.

Προαπαιτούμενα στοιχεία

  • Εάν δεν έχετε ήδη έναν, δημιουργήστε έναν χώρο εργασίας Fabric στον μισθωτή σας.
  • Εάν δεν έχετε ήδη ένα, δημιουργήστε ένα Περιβάλλον στον χώρο εργασίας σας.

Επιλογή 1: Προσθήκη διαμορφώσεων Spark σε προσαρμοσμένο περιβάλλον

Μέσα σε ένα περιβάλλον, μπορείτε να ορίσετε ιδιότητες Spark και αυτές οι ρυθμίσεις παραμέτρων εφαρμόζονται στον επιλεγμένο χώρο συγκέντρωσης περιβάλλοντος.

  1. Ανοίξτε το Synapse Studio: Πραγματοποιήστε είσοδο στο Azure. Μεταβείτε στον χώρο εργασίας σας Azure Synapse και ανοίξτε το Synapse Studio.
  2. Εντοπίστε διαμορφώσεις Spark:
    • Μεταβείτε στην επιλογή Διαχείριση περιοχής και επιλέξτε στην περιοχή Χώροι συγκέντρωσης Apache Spark.
    • Βρείτε τον χώρο συγκέντρωσης Apache Spark, επιλέξτε τη ρύθμιση παραμέτρων Apache Spark και εντοπίστε το όνομα ρύθμισης παραμέτρων Spark για τον χώρο συγκέντρωσης.
  3. Λήψη ρυθμίσεων Spark: Μπορείτε είτε να αποκτήσετε αυτές τις ιδιότητες επιλέγοντας Προβολή ρυθμίσεων παραμέτρων είτε εξάγοντας ρυθμίσεις παραμέτρων (.txt/.conf/.json μορφή) από διαμορφώσεις και βιβλιοθήκες>Apache Spark.
  4. Όταν έχετε διαμορφώσεις Spark, προσθέστε προσαρμοσμένες ιδιότητες Spark στο περιβάλλον σας στο Fabric:
    • Εντός του περιβάλλοντος, μεταβείτε στις ιδιότητες Spark Compute>Spark.
    • Προσθέστε ρυθμίσεις παραμέτρων Spark. Μπορείτε να προσθέσετε κάθε ένα από αυτά με μη αυτόματο τρόπο ή να κάνετε εισαγωγή από .yml.
  5. Κάντε κλικ στην επιλογή Αποθήκευση και δημοσίευση αλλαγών.

Στιγμιότυπο οθόνης που εμφανίζει ρυθμίσεις παραμέτρων Spark.

Μάθετε περισσότερα σχετικά με την προσθήκη ρυθμίσεων παραμέτρων Spark σε ένα περιβάλλον.

Σχετικό περιεχόμενο