คําถามที่พบบ่อยเกี่ยวกับ Data Factory ใน Microsoft Fabric

Data Factory ช่วยให้คุณสามารถแก้ปัญหาการรวมข้อมูลที่ซับซ้อนและสถานการณ์ ETL ด้วยการย้ายข้อมูลระดับคลาวด์และบริการการแปลงข้อมูลในขณะที่วิศวกรรมข้อมูลช่วยให้คุณสร้าง lake house ใช้ Apache Spark เพื่อแปลงและเตรียมข้อมูลของคุณ ความแตกต่างระหว่างคําศัพท์ / ประสบการณ์ Fabric แต่ละชนิดมีให้ภายใต้ คําศัพท์ Microsoft Fabric

ผู้ดูแลระบบความจุของ Microsoft Fabric สามารถใช้ แอปการวัด ความจุของ Microsoft Fabric หรือที่เรียกว่าแอปเมตริก เพื่อให้สามารถมองเห็นทรัพยากรความจุได้ แอปนี้ช่วยให้ผู้ดูแลระบบเพื่อดูว่ามีการใช้งาน CPU เวลาประมวลผล และหน่วยความจํามากน้อยเพียงใดโดยไปป์ไลน์ข้อมูล กระแสข้อมูล และรายการอื่น ๆ ในพื้นที่ทํางานที่เปิดใช้งานความจุของ Fabric มองเห็นสาเหตุการโอเวอร์โหลด เวลาความต้องการสูงสุด ปริมาณการใช้ทรัพยากร และระบุรายการที่ต้องการหรือได้รับความนิยมมากที่สุดได้อย่างง่ายดาย

คุณสามารถแยกปริมาณงานต่าง ๆ ระหว่างพื้นที่ทํางานและใช้บทบาทเช่นสมาชิกและผู้ชมเพื่อให้มีพื้นที่ทํางานสําหรับวิศวกรรมข้อมูลที่เตรียมข้อมูลสําหรับพื้นที่ทํางานที่ใช้สําหรับรายงานหรือการฝึกอบรม AI ด้วยบทบาทผู้ชม คุณสามารถใช้ข้อมูลจากพื้นที่ทํางานวิศวกรรมข้อมูลได้

ปัจจุบันเกตเวย์เครือข่ายเสมือนมีวิธีการฉีดเพื่อรวมเข้ากับเครือข่ายเสมือนของคุณอย่างราบรื่นทําให้มีช่องทางที่แข็งแกร่งสําหรับการใช้จุดสิ้นสุดส่วนตัวเพื่อสร้างการเชื่อมต่อที่ปลอดภัยไปยังที่เก็บข้อมูลของคุณ สิ่งสําคัญคือต้องทราบว่าเกตเวย์เครือข่ายเสมือนจริงรองรับเฉพาะกระแสข้อมูล Fabric ในขณะนี้เท่านั้น อย่างไรก็ตาม ความคิดริเริ่มที่กําลังจะมาถึงของเราครอบคลุมการขยายขีดความสามารถเพื่อครอบคลุมไปป์ไลน์ Fabric

เมื่อคุณใช้เกตเวย์ข้อมูลภายในองค์กร ตอนนี้คุณสามารถเชื่อมต่อกับแหล่งข้อมูลภายในองค์กรได้โดยใช้กระแสข้อมูลและไปป์ไลน์ข้อมูล (ตัวอย่าง) ด้วย Data Factory ใน Microsoft Fabric เมื่อต้องการเรียนรู้เพิ่มเติม ดูวิธีการเข้าถึงแหล่งข้อมูลภายในองค์กรใน Data Factory

การอัปเดตรายเดือนของ Fabric มีให้บริการที่ Microsoft Fabric Blog

การกําหนดราคา Data Factory ใน Microsoft Fabric ให้คําแนะนําที่ครอบคลุมเกี่ยวกับวิธีการคํานวณค่าใช้จ่ายสําหรับไปป์ไลน์ข้อมูลและกระแสข้อมูลรุ่น 2 ซึ่งรวมถึงสถานการณ์ตัวอย่างการกําหนดราคาหลายสถานการณ์เพื่อช่วยให้คุณเข้าใจรูปแบบการกําหนดราคาได้ดียิ่งขึ้น

มีอะไรใหม่และแผนสําหรับ Data Factory ใน Microsoft Fabric ให้ข้อมูลเชิงลึกเกี่ยวกับคุณลักษณะที่กําลังจะมาถึงและไทม์ไลน์การเปิดตัวโดยประมาณในช่วงอีกสองสามเดือนข้างหน้า

โรงงานข้อมูลแฟบริคช่วยให้คุณสามารถพัฒนาไปป์ไลน์ที่เพิ่มปริมาณงานการเคลื่อนไหวของข้อมูลให้สูงสุดสําหรับสภาพแวดล้อมของคุณ ไปป์ไลน์เหล่านี้ใช้ทรัพยากรต่อไปนี้อย่างเต็มที่:

• แบนด์วิดท์เครือข่ายระหว่างที่เก็บข้อมูลต้นทางและปลายทาง
• การดําเนินการอินพุต/เอาต์พุตของที่เก็บข้อมูลต้นทางหรือปลายทางต่อวินาที (IOPS) และแบนด์วิธ การใช้งานเต็มรูปแบบนี้หมายความว่าคุณสามารถประมาณอัตราความเร็วโดยรวมโดยการวัดอัตราความเร็วต่ําสุดที่พร้อมใช้งานกับทรัพยากรต่อไปนี้:
• ที่เก็บข้อมูลต้นทาง
• ที่เก็บข้อมูลปลายทาง
• แบนด์วิดท์เครือข่ายระหว่างที่เก็บข้อมูลต้นทางและปลายทางในขณะเดียวกันเราทํางานอย่างต่อเนื่องในนวัตกรรมเพื่อเพิ่มอัตราความเร็วที่ดีที่สุดที่คุณสามารถทําได้ วันนี้ บริการสามารถย้ายชุดข้อมูล TPC TPC-DI 1 TB (ไฟล์ parquet) ไปยังทั้งตาราง Fabric Lakehouse และ Data Warehouse ได้ภายใน 5 นาที - ย้ายแถว 1B ภายใน 1 นาที; โปรดทราบว่าประสิทธิภาพนี้เป็นเพียงการอ้างอิงโดยการเรียกใช้ชุดข้อมูลการทดสอบข้างต้น ปริมาณงานจริงยังคงขึ้นอยู่กับปัจจัยที่ระบุไว้ก่อนหน้านี้ นอกจากนี้ คุณสามารถคูณอัตราความเร็วของคุณโดยการเรียกใช้กิจกรรมการคัดลอกหลายรายการพร้อมกันได้เสมอ ตัวอย่างเช่น การใช้การวนรอบ ForEach

โฟกัสปัจจุบันของเราเกี่ยวข้องกับการพัฒนาที่ใช้งานของความสามารถ CDC ภายใน Data Factory ใน Fabric ความสามารถที่กําลังจะเกิดขึ้นนี้ช่วยให้คุณสามารถย้ายข้อมูลข้ามแหล่งข้อมูลหลายแหล่งที่รวมรูปแบบการคัดลอกที่แตกต่างกัน รวมถึงรูปแบบการคัดลอกจํานวนมาก/ชุด รูปแบบการคัดลอกแบบเพิ่มหน่วย/ต่อเนื่อง (CDC) และรูปแบบการคัดลอกแบบเรียลไทม์ลงในประสบการณ์ 5x5

กิจกรรม Power Query ภายใน ADF จะแชร์ความคล้ายคลึงกับ Dataflow Gen2 แต่มีคุณลักษณะเพิ่มเติมที่เปิดใช้งานการดําเนินการเช่นการเขียนไปยังปลายทางข้อมูลที่เฉพาะเจาะจงเป็นต้น การเปรียบเทียบนี้จัดแนวอย่างเป็นธรรมมากขึ้นด้วยกระแสข้อมูล Gen1 (กระแสข้อมูล Power BI หรือกระแสข้อมูล Power Apps) ลองดูที่นี่สําหรับรายละเอียดเพิ่มเติม: ความแตกต่างระหว่าง Dataflow Gen1 และ Dataflow Gen2

ในประสบการณ์การใช้งานของผู้ใช้บางประการ คุณอาจพบวัตถุของระบบที่ไม่ได้มีไว้สําหรับการโต้ตอบ เป็นการดีที่สุดที่จะละเว้นสิ่งประดิษฐ์เหล่านี้ เนื่องจากวัตถุเหล่านี้จะถูกลบออกจากประสบการณ์การรับข้อมูลในอนาคตในที่สุด

ข้อความแสดงข้อผิดพลาดนี้เกิดขึ้นเมื่อผู้ใช้ที่สร้างกระแสข้อมูลแรกในพื้นที่ทํางานไม่ได้เข้าสู่ระบบ Fabric นานกว่า 90 วันหรือออกจากองค์กร เมื่อต้องการแก้ไขปัญหานี้ ผู้ใช้ที่กล่าวถึงในข้อความแสดงข้อผิดพลาดควรเข้าสู่ระบบ Fabric หากผู้ใช้ออกจากองค์กรไปแล้ว โปรด เปิดตั๋วการสนับสนุน

ไปป์ไลน์ Azure Data Factory (ADF) และ Azure Synapse ยังคงรักษาแผนงานแพลตฟอร์มเป็นบริการ (PaaS) แยกต่างหาก ทั้งสองวิธีดังกล่าวยังคงร่วมมือกันควบคู่ไปกับ Fabric Data Factory ซึ่งทําหน้าที่เป็นข้อเสนอของ Software as a Service (SaaS) ไปป์ไลน์ ADF และ Synapse ยังคงรองรับอย่างสมบูรณ์และไม่มีแผนสําหรับการสนับสนุน สิ่งสําคัญคือต้องเน้นว่าสําหรับโครงการใด ๆ ที่กําลังจะมาถึง คําแนะนําของเราคือการเริ่มต้นใช้ Fabric Data Factory นอกจากนี้เรามีกลยุทธ์เพื่ออํานวยความสะดวกในการเปลี่ยนไปป์ไลน์ ADF และ Synapse ไปยัง Fabric Data Factory ทําให้สามารถใช้ประโยชน์จากฟังก์ชันการทํางานผ้าใหม่ คุณสามารถเรียนรู้เพิ่มเติมเกี่ยวกับสิ่งนี้ได้ที่นี่

ในขณะที่เรามุ่งมั่นที่จะบริดจ์ช่องว่างฟังก์ชันการทํางานและรวมการประสานงานของไปป์ไลน์ข้อมูลที่แข็งแกร่งและความสามารถของเวิร์กโฟลว์ที่พบในท่อ ADF / Azure Synapse ลงใน Fabric Data Factory เรายอมรับว่าคุณลักษณะบางอย่างที่มีอยู่ในไปป์ไลน์ ADF / Synapse อาจจําเป็นสําหรับความต้องการของคุณ ในขณะที่คุณแนะนําให้ใช้ไปป์ไลน์ ADF / Synapse ต่อไปหากคุณลักษณะเหล่านี้เป็นสิ่งจําเป็น เราขอแนะนําให้คุณสํารวจความเป็นไปได้ในการรวมข้อมูลใหม่ของคุณใน Fabric ก่อน คําติชมของคุณเกี่ยวกับคุณลักษณะสําคัญสําหรับความสําเร็จของคุณนั้นทรงคุณค่า เพื่ออํานวยความสะดวกนี้ เรากําลังพยายามอย่างแข็งขันในการนําเสนอความสามารถใหม่ ที่เปิดใช้งานการโยกย้ายโรงงานข้อมูลของคุณที่มีอยู่จาก Azure ลงในพื้นที่ทํางาน Fabric ได้เช่นกัน

เราไม่ส่งคุณลักษณะใหม่จากไปป์ไลน์ Fabric ลงในไปป์ไลน์ ADF / Synapse เรารักษาแผนการทํางานแยกสองแบบสําหรับโรงงานข้อมูลผ้าและ ADF/ Synapse เราประเมินคําขอ backport เพื่อตอบสนองต่อคําติชมที่เข้ามา

หน้าที่หลักของ Fabric pipeline นั้นคล้ายกับไปป์ไลน์ Azure Synapse แต่โดยการใช้ไปป์ไลน์ Fabric ผู้ใช้สามารถใช้ความสามารถในการวิเคราะห์ข้อมูลทั้งหมดในแพลตฟอร์ม Fabric ได้ ความแตกต่างที่โดดเด่นและการแมปคุณลักษณะระหว่าง Fabric pipeline และ Azure Synapse pipeline สามารถพบได้ที่นี่: ความแตกต่างระหว่าง Data Factory ใน Fabric และ Azure

เพื่ออํานวยความสะดวกในการเปลี่ยนของลูกค้าไปยัง Microsoft Fabric จาก Azure Data Factory (ADF) เรามีคุณลักษณะและกลไกการสนับสนุนที่จําเป็นมากมาย ก่อนอื่น เราให้การสนับสนุนที่ครอบคลุมสําหรับกิจกรรมส่วนใหญ่ที่ใช้ใน ADF ภายใน Fabric พร้อมกับการเพิ่มกิจกรรมใหม่ที่ปรับให้เหมาะสมสําหรับการแจ้งเตือน เช่น Teams และฟังก์ชันการทํางานของ Outlook ลูกค้าสามารถเข้าถึงรายการโดยละเอียดของกิจกรรมที่มีอยู่ใน Data Factory ภายใน Fabric นอกจากนี้ เรายังได้แนะนําตัวเชื่อมต่อ Fabric Lakehouse / Warehouse ใน Azure Data Factory ซึ่งช่วยให้สามารถรวมข้อมูลได้อย่างราบรื่นในสภาพแวดล้อม OneLake ของ Fabric สําหรับลูกค้า ADF นอกจากนี้เรายังให้ คําแนะนําสําหรับลูกค้า ADF ซึ่งช่วยในการแมปการแปลงโฟลว์ข้อมูลการแมปที่มีอยู่ของคุณไปยังการแปลงกระแสข้อมูล Gen2 ใหม่ ในขณะที่เรามองไปข้างหน้า เรากําลังรวมความสามารถในการติดตั้งทรัพยากร ADF ลงใน Fabric ในแผนการทํางานของเรา ซึ่งจะช่วยให้ลูกค้าสามารถรักษาฟังก์ชันการทํางานของไปป์ไลน์ ADF ที่มีอยู่บน Azure ในขณะที่สํารวจ Fabric และวางแผนกลยุทธ์การอัปเกรดที่ครอบคลุม เรากําลังทํางานร่วมกันอย่างใกล้ชิดกับลูกค้าและชุมชนเพื่อกําหนดวิธีที่มีประสิทธิภาพที่สุดในการสนับสนุนการย้ายไปป์ไลน์ข้อมูลจาก ADF ไปยัง Fabric ในฐานะส่วนหนึ่งของความพยายามนี้ เราจะมอบประสบการณ์การอัปเกรดที่ช่วยให้คุณสามารถทดสอบไปป์ไลน์ข้อมูลปัจจุบันของคุณใน Fabric ผ่านกระบวนการติดตั้งและการอัปเกรด

เนื้อหาที่เกี่ยวข้อง

บทนํา - บทช่วยสอน Data Factory