โยกย้ายกลุ่ม Spark จาก Azure Synapse Analytics ไปยัง Fabric
ในขณะที่ Azure Synapse มีสระว่ายน้ํา Spark แต่ Fabric ก็มี สระว่ายน้ํา Starter และ พูลแบบกําหนดเอง กลุ่ม Starter สามารถเป็นตัวเลือกที่ดีถ้าคุณมีกลุ่มเดียวที่ไม่มีการกําหนดค่าหรือไลบรารีแบบกําหนดเองใน Azure Synapse และถ้า ขนาด โหนดขนาดกลางตรงกับความต้องการของคุณ อย่างไรก็ตาม ถ้าคุณค้นหาความยืดหยุ่นมากขึ้นด้วยการกําหนดค่าพูล Spark ของคุณ เราขอแนะนําให้ใช้ พูลแบบกําหนดเอง มีสองตัวเลือกที่นี่:
- ตัวเลือกที่ 1: ย้ายพูล Spark ของคุณไปยังพูลเริ่มต้นของพื้นที่ทํางาน
- ตัวเลือกที่ 2: ย้ายพูล Spark ของคุณไปยังสภาพแวดล้อมแบบกําหนดเองใน Fabric
ถ้าคุณมีพูล Spark มากกว่าหนึ่งรายการ และคุณวางแผนที่จะย้ายจุดเหล่านั้นไปยังพื้นที่ทํางาน Fabric เดียวกัน เราขอแนะนําให้ใช้ตัวเลือกที่ 2 สร้างสภาพแวดล้อมและพูลแบบกําหนดเองหลายรายการ
สําหรับข้อควรพิจารณาเกี่ยวกับ Spark pool โปรดดูความแตกต่างระหว่าง Azure Synapse Spark และ Fabric
ข้อกำหนดเบื้องต้น
ถ้าคุณยังไม่มี พื้นที่ทํางาน Fabric ในผู้เช่าของคุณ
ตัวเลือกที่ 1: จากพูล Spark เป็นพูลเริ่มต้นของพื้นที่ทํางาน
คุณสามารถสร้างพูล Spark แบบกําหนดเองจากพื้นที่ทํางาน Fabric ของคุณ และใช้เป็นพูลตามค่าเริ่มต้นในพื้นที่ทํางาน กลุ่มเริ่มต้นถูกใช้โดยสมุดบันทึกทั้งหมดและข้อกําหนดงาน Spark ในพื้นที่ทํางานเดียวกัน
หากต้องการย้ายจากพูล Spark ที่มีอยู่จาก Azure Synapse ไปยังกลุ่มค่าเริ่มต้นของพื้นที่ทํางาน:
- เข้าถึงพื้นที่ทํางาน Azure Synapse: ลงชื่อเข้าใช้ Azure นําทางไปยังพื้นที่ทํางาน Azure Synapse ของคุณ ไปที่ พูล การวิเคราะห์และเลือก กลุ่ม Apache Spark
- ค้นหาที่ตั้งของสระว่ายน้ํา Spark: จากสระว่ายน้ํา Apache Spark ค้นหาพูล Spark ที่คุณต้องการย้ายไปยัง Fabric และตรวจสอบคุณสมบัติพูล
- รับคุณสมบัติ: รับคุณสมบัติพูลของ Spark เช่น เวอร์ชัน Apache Spark, ตระกูลขนาดโหนด, ขนาดโหนด หรือการปรับขนาดอัตโนมัติ โปรดดูข้อ ควรพิจารณาเกี่ยวกับ พูล Spark เพื่อดูความแตกต่างใด ๆ
-
สร้างพูล Spark แบบกําหนดเองใน Fabric:
- ไปยัง พื้นที่ทํางาน Fabric และเลือก การตั้งค่าพื้นที่ทํางาน
- ไปที่ วิศวกรข้อมูล/วิทยาศาสตร์ และเลือก การตั้งค่า Spark
- จากแท็บพูลและในส่วนกลุ่มค่าเริ่มต้นสําหรับพื้นที่ทํางาน ขยายเมนูดรอปดาวน์และเลือกสร้างกลุ่มใหม่
- สร้างกลุ่ม แบบกําหนดเองของคุณด้วยค่าเป้าหมายที่สอดคล้องกัน กรอกชื่อ ตระกูลโหนด ขนาดโหนด การปรับขนาดอัตโนมัติ และตัวเลือกการจัดสรรผู้ดําเนินการแบบไดนามิก
-
เลือกเวอร์ชันรันไทม์:
- ไปที่แท็บ สภาพแวดล้อม และเลือกเวอร์ชันรันไทม์ที่จําเป็น ดูรันไทม์ที่พร้อมใช้งานที่นี่
- ปิดใช้งานตัวเลือก ตั้งค่าสภาพแวดล้อม เริ่มต้น
หมายเหตุ
ในตัวเลือกนี้ ไลบรารีระดับพูลหรือการกําหนดค่าไม่ได้รับการสนับสนุน อย่างไรก็ตาม คุณสามารถปรับการกําหนดค่าการคํานวณสําหรับแต่ละรายการ เช่น สมุดบันทึกและข้อกําหนดงาน Spark และเพิ่มไลบรารีแบบอินไลน์ได้ ถ้าคุณต้องการเพิ่มไลบรารีและการกําหนดค่าแบบกําหนดเองให้กับสภาพแวดล้อม ให้พิจารณาสภาพแวดล้อมแบบกําหนดเอง
ตัวเลือกที่ 2: จากพูล Spark สู่สภาพแวดล้อมแบบกําหนดเอง
ด้วยสภาพแวดล้อมแบบกําหนดเอง คุณสามารถตั้งค่าคุณสมบัติ Spark และไลบรารีแบบกําหนดเองได้ เมื่อต้องสร้างสภาพแวดล้อมแบบกําหนดเอง:
- เข้าถึงพื้นที่ทํางาน Azure Synapse: ลงชื่อเข้าใช้ Azure นําทางไปยังพื้นที่ทํางาน Azure Synapse ของคุณ ไปที่ พูล การวิเคราะห์และเลือก กลุ่ม Apache Spark
- ค้นหาที่ตั้งของสระว่ายน้ํา Spark: จากสระว่ายน้ํา Apache Spark ค้นหาพูล Spark ที่คุณต้องการย้ายไปยัง Fabric และตรวจสอบคุณสมบัติพูล
- รับคุณสมบัติ: รับคุณสมบัติพูลของ Spark เช่น เวอร์ชัน Apache Spark, ตระกูลขนาดโหนด, ขนาดโหนด หรือการปรับขนาดอัตโนมัติ โปรดดูข้อ ควรพิจารณาเกี่ยวกับ พูล Spark เพื่อดูความแตกต่างใด ๆ
-
สร้างพูล Spark แบบกําหนดเอง:
- ไปยัง พื้นที่ทํางาน Fabric และเลือก การตั้งค่าพื้นที่ทํางาน
- ไปที่ วิศวกรข้อมูล/วิทยาศาสตร์ และเลือก การตั้งค่า Spark
- จากแท็บพูลและในส่วนกลุ่มค่าเริ่มต้นสําหรับพื้นที่ทํางาน ขยายเมนูดรอปดาวน์และเลือกสร้างกลุ่มใหม่
- สร้างกลุ่ม แบบกําหนดเองของคุณด้วยค่าเป้าหมายที่สอดคล้องกัน กรอกชื่อ ตระกูลโหนด ขนาดโหนด การปรับขนาดอัตโนมัติ และตัวเลือกการจัดสรรผู้ดําเนินการแบบไดนามิก
- สร้างรายการสภาพแวดล้อม ถ้าคุณไม่มี
-
กําหนดค่าการคํานวณ Spark:
- ภายในสภาพแวดล้อม ไปที่ Spark Compute>Compute
- เลือกกลุ่มที่สร้างขึ้นใหม่สําหรับสภาพแวดล้อมใหม่
- คุณสามารถกําหนดค่าโปรแกรมควบคุมและแกนตัวปฏิบัติการและหน่วยความจําได้
- เลือกเวอร์ชัน รันไทม์สําหรับสภาพแวดล้อม ดูรันไทม์ที่พร้อมใช้งานที่นี่
- คลิกที่ บันทึก และ เผยแพร่ การเปลี่ยนแปลง
เรียนรู้เพิ่มเติมเกี่ยวกับการสร้างและการใช้สภาพแวดล้อม