แชร์ผ่าน


โยกย้ายไลบรารี Spark จาก Azure Synapse ไปยัง Fabric

Azure Synapse Spark pool มีตัวเลือกฟีดและไลบรารีแบบกําหนดเองที่แตกต่างกัน ใน Fabric รันไทม์แต่ละชุดจะมาพร้อมกับชุดไลบรารีที่ติดตั้งไว้ล่วงหน้า (ไลบรารีในตัว) อย่างไรก็ตาม คุณยังสามารถรวมไลบรารีอื่น ๆ โดยใช้ ไลบรารี สภาพแวดล้อมและ ไลบรารีแบบอินไลน์โดยยึดตามสถานการณ์และความต้องการเฉพาะของคุณ หากต้องการย้ายไลบรารีพูล Azure Synapse Spark ไปยัง Fabric ให้ใช้ไลบรารีสภาพแวดล้อม

สําหรับข้อควรพิจารณาของไลบรารี Spark โปรดดูความแตกต่างระหว่าง Azure Synapse Spark และ Fabric

ข้อกำหนดเบื้องต้น

  • ถ้าคุณยังไม่มี พื้นที่ทํางาน Fabric ในผู้เช่าของคุณ
  • ถ้าคุณยังไม่มี ให้ สร้างสภาพแวดล้อม ในพื้นที่ทํางานของคุณ

ตัวเลือกที่ 1: การเพิ่มไลบรารี Spark ไปยังสภาพแวดล้อมแบบกําหนดเอง

คุณสามารถย้ายไลบรารีพูล Spark ไปยังสภาพแวดล้อมได้ดังนี้:

  1. เปิด Synapse Studio: ลงชื่อเข้าใช้ Azure นําทางไปยังพื้นที่ทํางาน Azure Synapse ของคุณและเปิด Synapse Studio
  2. ค้นหาไลบรารี Spark:
    • ไปที่ จัดการ พื้นที่ และเลือกบน สระว่ายน้ํา Apache Spark
    • ค้นหา Apache Spark pool เลือก แพคเกจ และค้นหาไลบรารี Spark สําหรับพูล
  3. รับไลบรารี Spark: ค้นหา requirements.txt แพคเกจ environment.yml หรือพื้นที่ทํางานที่ติดตั้งในพูล รับรายการไลบรารีที่ติดตั้งบนพูล
  4. เมื่อคุณมีไลบรารี Spark ให้เพิ่มไลบรารี Spark แบบกําหนดเองลงในสภาพแวดล้อมใน Fabric ภายในสภาพแวดล้อมของคุณ ไปที่ไลบรารีและเพิ่มไลบรารี:
    • จาก ไลบรารี สาธารณะ คุณสามารถอัปโหลดไฟล์.yml ได้ คุณยังสามารถติดตั้งไลบรารีโดยใช้ PyPI และ Conda ได้อีกด้วย
    • จาก ไลบรารี แบบกําหนดเอง คุณสามารถติดตั้งไลบรารีโดยใช้ไฟล์ .jar/.whl/.tar.gz ได้
  5. คลิกที่ บันทึก และ เผยแพร่ การเปลี่ยนแปลง

สกรีนช็อตที่แสดงไลบรารี Spark

เรียนรู้เพิ่มเติมเกี่ยวกับการเพิ่มไลบรารี Spark ไปยังสภาพแวดล้อม

หมายเหตุ

โปรดทราบว่าการติดตั้งไลบรารีอาจใช้เวลาสักครู่