ย้ายจากกระแสข้อมูลรุ่น 1 ไปยังกระแสข้อมูล รุ่น 2
บทความนี้มุ่งเป้าหมายไปยังผู้สร้างกระแสข้อมูล Power BI โดยมีคําแนะนําและเหตุผลเพื่อช่วยโยกย้ายกระแสข้อมูลไปยังกระแสข้อมูล Gen2 ใน Data Factory สําหรับ Microsoft Fabric
โน้ต
Dataflow Gen2 คือกระแสข้อมูลรุ่นใหม่ที่มอบคุณลักษณะใหม่และประสบการณ์ที่ดีขึ้น กระแสข้อมูล Gen2 อยู่ข้างๆ กระแสข้อมูล Power BI ซึ่งตอนนี้เรียกว่า Dataflow Gen1
เพื่อทําความเข้าใจความแตกต่างระหว่าง Dataflow Gen1 และ Dataflow Gen2 โปรดดู การรับจากการสร้างกระแสข้อมูลรุ่นที่ 1 ไปยังรุ่นกระแสข้อมูล 2
พื้นหลัง
Microsoft Fabric ได้พัฒนาลงในแพลตฟอร์มแบบรวมสําหรับทั้งข้อมูลองค์กรแบบบริการตนเองและข้อมูลองค์กรที่จัดการด้วยไอที ด้วยการเติบโตของเอ็กซ์โพเนนเชียลในปริมาณข้อมูลและความซับซ้อน ลูกค้า Fabric ต้องการให้โซลูชันระดับองค์กรของพวกเขามีความปลอดภัย จัดการง่าย และสามารถเข้าถึงผู้ใช้ทั้งหมดทั่วทั้งองค์กรขนาดใหญ่ได้
ในช่วงไม่กี่ปีที่ผ่านมา Microsoft ได้พยายามอย่างยอดเยี่ยมเพื่อส่งมอบความสามารถของระบบคลาวด์ที่ปรับขนาดได้ให้กับ ความจุ Fabric ด้วยเหตุนี้ Data Factory in Fabric จึงสนับสนุนระบบนิเวศน์ขนาดใหญ่ของนักพัฒนาการผสานรวมข้อมูลและโซลูชันการผสานรวมข้อมูลที่สร้างขึ้นมาหลายทศวรรษแล้ว ซึ่งใช้ประโยชน์จากชุดคุณลักษณะและความสามารถเต็มรูปแบบที่อยู่ไกลเกินกว่าฟังก์ชันที่สามารถเปรียบเทียบได้ที่มีอยู่ในรุ่นก่อน ๆ
โดยทั่วไปลูกค้าจะถามว่ามีโอกาสรวมโซลูชันการรวมข้อมูลของพวกเขาโดยการโฮสต์ภายใน Fabric หรือไม่ พวกเขามักจะถามคําถามเช่น:
- ฟังก์ชันกระแสข้อมูลทั้งหมดที่เราขึ้นอยู่กับ Dataflow Gen2 หรือไม่
- มีความสามารถอะไรบ้างใน Dataflow Gen2 เท่านั้น?
- เราจะโยกย้ายกระแสข้อมูลที่มีอยู่ไปยัง Dataflow Gen2 ได้อย่างไร
- แผนงานของ Microsoft สําหรับการนําเข้าข้อมูลองค์กรคืออะไร
คําตอบของคําถามเหล่านี้หลายข้อจะอธิบายไว้ในบทความนี้
โน้ต
การตัดสินใจในการโยกย้ายไปยังความจุ Fabric ขึ้นอยู่กับความต้องการของลูกค้าแต่ละราย ลูกค้าควรประเมินประโยชน์อย่างรอบคอบเพื่อตัดสินใจอย่างชาญฉลาด เราคาดหวังที่จะเห็นการโยกย้ายข้อมูลแบบออร์แกนิกไปยัง Dataflow Gen2 เมื่อเวลาผ่านไป และความตั้งใจของเราคือมันเกิดขึ้นในแง่ที่ลูกค้าพอใจ
เพื่อความชัดเจน ขณะนี้ยังไม่มีแผนที่จะยกเลิกการสนับสนุนกระแสข้อมูล Power BI หรือกระแสข้อมูล Power Platform อย่างไรก็ตาม มีความสําคัญในการมุ่งเน้นการลงทุนใน Dataflow Gen2 สําหรับการนําเข้าข้อมูลองค์กร ดังนั้นค่าที่ให้มาโดยความจุ Fabric จะเพิ่มขึ้นเมื่อเวลาผ่านไป ลูกค้าที่เลือกความจุผ้าสามารถคาดหวังจะได้รับประโยชน์จากการปรับให้สอดคล้องกับแผนงานผลิตภัณฑ์ Microsoft Fabric
การหลากตัวของการรวมข้อมูลแบบบริการตนเองและองค์กร
การรวมรายการใน Fabric ช่วยลดความซับซ้อนของการค้นหา การทํางานร่วมกัน และการจัดการโดยการค้นหาทรัพยากรร่วม ซึ่งช่วยให้ทีมไอทีส่วนกลางสามารถนํามาใช้และรวมรายการบริการตนเองที่ได้รับความนิยมได้อย่างง่ายดาย ในเวลาเดียวกันจะช่วยให้สามารถดําเนินการเคลื่อนย้ายข้อมูลที่สําคัญต่อภารกิจและบริการการแปลงข้อมูลที่สอดคล้องกับมาตรฐานขององค์กรรวมถึงสายข้อมูลและการตรวจสอบ
เพื่อรองรับความต้องการใช้งานร่วมกันและปรับขนาดได้ของผู้สร้าง Dataflow Gen2 ใน Fabric จึงนําเสนอสําเนาที่รวดเร็ว ซึ่งช่วยให้สามารถนําเข้าปริมาณข้อมูลขนาดใหญ่ได้อย่างมีประสิทธิภาพโดยใช้โครงสร้างพื้นฐาน Backend ของ Fabric เพื่อ จัดเก็บและประมวลผล ข้อมูลระดับกลางในระหว่างการแปลง ซึ่งสามารถจัดการกับข้อมูลหลายเทราไบต์ได้อย่างราบรื่น ผู้สร้างกระแสข้อมูลสามารถระบุ ปลายทางของข้อมูล สําหรับข้อมูลที่เปลี่ยนแปลงเช่น Fabric lakehouse คลังสินค้า eventhouse หรือฐานข้อมูล Azure SQL ที่อํานวยความสะดวกในการจัดการข้อมูลและการเข้าถึงที่ดีขึ้น ยิ่งไปกว่านั้นการผสานรวม AI ที่สร้างล่าสุดผ่าน Copilot ปรับปรุงประสบการณ์การเตรียมข้อมูลโดยการให้การสร้างโค้ดอัจฉริยะและงานที่ซ้ํา ๆ โดยอัตโนมัติทําให้เป็นเส้นทางที่ง่ายและรวดเร็วกว่าในการสร้างโซลูชันที่ซับซ้อน
ด้วยการใช้แพลตฟอร์มทั่วไป เวิร์กโฟลว์มีความคล่องตัว ซึ่งส่งผลให้การทํางานร่วมกันระหว่างธุรกิจและไอทีดียิ่งขึ้น ดังนั้นองค์กรจึงได้รับอํานาจในการปรับมาตราส่วนโซลูชันข้อมูลของพวกเขาในระดับองค์กร เพื่อให้มั่นใจถึงประสิทธิภาพสูง ความยืดหยุ่น และประสิทธิภาพในการจัดการข้อมูลจํานวนมาก
ความจุผ้า
ด้วยสถาปัตยกรรมแบบกระจาย ความจุของ Fabric มีความอ่อนไหวต่อการโหลดโดยรวมการเพิ่มขึ้นของอุณหภูมิและภาวะพร้อมกันสูงน้อยลง ด้วยการรวมความจุไปยัง SKU ความจุ Fabric ที่มีขนาดใหญ่กว่า ลูกค้าสามารถเพิ่มประสิทธิภาพและอัตราความเร็วที่เพิ่มขึ้น
การเปรียบเทียบคุณลักษณะ
ตารางต่อไปนี้แสดงคุณลักษณะที่ได้รับการสนับสนุนในกระแสข้อมูล Power BI และ/หรือ Fabric Dataflow Gen2
คุณลักษณะ | Power BI Dataflow Gen1 | Fabric Dataflow Gen2 |
---|---|---|
การเชื่อมต่อ |
||
การสนับสนุนสําหรับ แหล่งข้อมูล Power Query ทั้งหมด | ใช่ | ใช่ |
เชื่อมต่อและโหลดข้อมูลจาก กระแสข้อมูลใน Power BI Desktop, Excel หรือ Power Apps | ใช่ | ใช่ |
ความสามารถในการปรับขนาดของ |
||
Fast copyซึ่งสนับสนุนการนําเข้าข้อมูลขนาดใหญ่ โดยใช้ไปป์ไลน์ข้อมูล คัดลอกกิจกรรม ภายในกระแสข้อมูล | ไม่ใช่ | ใช่ |
รีเฟรชตามกําหนดเวลา ซึ่งทําให้ข้อมูลเป็นปัจจุบัน | ใช่ | ใช่ |
การรีเฟรชแบบเพิ่มหน่วยซึ่งใช้นโยบายในการโหลดข้อมูลแบบเพิ่มหน่วยโดยอัตโนมัติ และสามารถช่วยในการส่งมอบการรายงานใกล้เคียงกับการรายงานแบบเรียลไทม์ | ใช่ | ใช่ |
การจัดเรียงไปป์ไลน์ข้อมูลซึ่งช่วยให้คุณสามารถเพิ่มกิจกรรมกระแสข้อมูล ไปยังไปป์ไลน์ข้อมูลและสร้างเหตุการณ์แบบมีเงื่อนไข orchestrated | ไม่ใช่ | ใช่ |
ปัญญาประดิษฐ์ของ |
||
Copilot สําหรับ Data Factoryซึ่งมีการสร้างโค้ดอัจฉริยะเพื่อแปลงข้อมูลได้อย่างง่ายดาย และสร้างคําอธิบายโค้ดเพื่อช่วยให้เข้าใจงานที่ซับซ้อนได้ดียิ่งขึ้น | ไม่ใช่ | ใช่ |
Cognitive Servicesซึ่งใช้ปัญญาประดิษฐ์ (AI) เพื่อใช้อัลกอริทึมต่างๆ จาก Azure Cognitive Services เพื่อเสริมสร้างการเตรียมข้อมูลแบบบริการตนเอง | ใช่ | ไม่มี 1 |
การเรียนของเครื่องอัตโนมัติ (AutoML)ซึ่งช่วยให้นักวิเคราะห์ธุรกิจสามารถฝึกตรวจสอบและเรียกใช้แบบจําลองการเรียนรู้ของเครื่อง (ML) โดยตรงใน Fabric | |
|
การรวม ของ Azure Machine Learning ซึ่งแสดงแบบจําลองแบบกําหนดเองเป็นฟังก์ชัน Power Query แบบไดนามิกที่ผู้ใช้สามารถเรียกใช้ในตัวแก้ไข Power Query ได้ | ใช่ | ไม่มี 1 |
การจัดการเนื้อหา |
||
มุมมองสายข้อมูลซึ่งช่วยให้ผู้ใช้เข้าใจและประเมินการขึ้นต่อกันของรายการกระแสข้อมูล | ใช่ | ใช่ |
ไปป์ไลน์การปรับใช้ซึ่งจัดการวงจรชีวิตของเนื้อหา Fabric | ใช่ | ใช่ |
ความสามารถในการปรับขนาดและความยืดหยุ่นของแพลตฟอร์ม | ||
สถาปัตยกรรม ความจุแบบพรีเมียมของ |
ใช่ | ใช่ |
การสนับสนุน Multi-Geo ซึ่งช่วยให้ลูกค้าข้ามชาติจัดการกับข้อกําหนดด้านถิ่นที่อยู่ของข้อมูลระดับภูมิภาค เฉพาะอุตสาหกรรม หรือองค์กร | ใช่ 3 | ใช่ |
รักษาความปลอดภัยของ |
||
เกตเวย์ข้อมูล Virtual Network (VNet) การเชื่อมต่อ ซึ่งช่วยให้ Fabric สามารถทํางานได้อย่างราบรื่นในเครือข่ายเสมือนขององค์กร | ไม่ใช่ | ใช่ |
เกตเวย์ข้อมูลภายในองค์กร การเชื่อมต่อ ซึ่งช่วยให้สามารถเข้าถึงข้อมูลระหว่างแหล่งข้อมูลภายในองค์กรและ Fabric ได้อย่างปลอดภัย | ใช่ | ใช่ |
แท็กบริการของ Azure สนับสนุน ซึ่งเป็นกลุ่มที่กําหนดของที่อยู่ IP ที่ได้รับการจัดการโดยอัตโนมัติเพื่อลดความซับซ้อนของการอัปเดตหรือการเปลี่ยนแปลงกฎความปลอดภัยของเครือข่าย | ใช่ | ใช่ |
การกํากับดูแล |
||
เนื้อหา รับรองเพื่อส่งเสริมหรือรับรองรายการผ้าที่มีคุณค่าคุณภาพสูง | ใช่ | ใช่ |
การรวม Microsoft Purviewซึ่งช่วยให้ลูกค้าจัดการและควบคุมรายการ Fabric | ใช่ | ใช่ |
ป้ายชื่อระดับความลับ ของ Microsoft Information Protection (MIP) และการรวมเข้ากับ Microsoft Defender for Cloud Apps สําหรับการป้องกันการสูญหายของข้อมูล (DLP) | ใช่ | ใช่ |
ตรวจสอบและบันทึกการวินิจฉัย |
||
ประวัติการรีเฟรช ที่ปรับปรุงประสิทธิภาพแล้วซึ่งช่วยให้คุณสามารถประเมินโดยละเอียดได้ว่าเกิดอะไรขึ้นในระหว่างการรีเฟรชกระแสข้อมูลของคุณ | ไม่ใช่ | ใช่ |
การตรวจสอบฮับ ซึ่งให้การตรวจสอบความสามารถในการตรวจสอบสําหรับรายการ Fabric | ไม่ใช่ | ใช่ |
แอปเมตริกความจุ Microsoft Fabricซึ่งให้การตรวจสอบความสามารถในการผลิตสําหรับความจุ Fabric | ใช่ | ใช่ |
บันทึกการตรวจสอบซึ่งจะติดตามกิจกรรมของผู้ใช้ทั่วทั้ง Fabric และ Microsoft 365 | ใช่ | ใช่ |
1 เพื่อเรียนรู้วิธีสร้างฟังก์ชันแบบกําหนดเองที่เรียกใช้จุดสิ้นสุด Azure AI API โปรดดูบทช่วยสอน : แยกวลีสําคัญจากข้อความที่เก็บไว้ใน Power BI
2 Machine Learning (AutoML) อัตโนมัติได้ถูกยกเลิก สําหรับข้อมูลเพิ่มเติม โปรดดู ประกาศอย่างเป็นทางการนี้
3 เพื่อกําหนดค่าที่เก็บกระแสข้อมูล Power BI เพื่อใช้ Azure Data Lake Storage (ADLS) Gen2 โปรดดู บทความนี้
ข้อ ควร พิจารณา
มีข้อควรพิจารณาอื่น ๆ เกี่ยวกับปัจจัยในการวางแผนของคุณก่อนโยกย้ายข้อมูลไปยังกระแสข้อมูล Gen2
อนุญาต
คุณจําเป็นต้องมีสิทธิ์การใช้งาน Pro หรือ Premium Per User (PPU) เพื่อเผยแพร่หรือจัดการกระแสข้อมูล Power BI (Dataflow Gen1) ในทางตรงกันข้าม คุณจําเป็นต้องมีสิทธิ์การใช้งาน Microsoft Fabric (ฟรี) เท่านั้นเพื่อเขียนกระแสข้อมูล Gen2 ในพื้นที่ทํางานความจุพรีเมียม
สถานการณ์การโยกย้าย
เมื่อคุณโยกย้ายกระแสข้อมูลของคุณ สิ่งสําคัญคือต้องคิดว่านอกเหนือจากการคัดลอกโซลูชันที่มีอยู่ แต่เราขอแนะนําให้ปรับโซลูชันของคุณให้ทันสมัยโดยการใช้ประโยชน์จากนวัตกรรมและความสามารถล่าสุดของกระแสข้อมูล Gen2 วิธีนี้ช่วยให้มั่นใจว่าโซลูชันของคุณสามารถสนับสนุนความต้องการที่เพิ่มขึ้นของธุรกิจ
ในบทความ สถานการณ์การโยกย้ายข้อมูล มีการอธิบายวิธีการต่างๆ สําหรับการอัปเกรด การใช้สินค้าคงคลัง และการใช้ตัวเร่ง เช่น เทมเพลต Power Query จะอธิบายไว้ วิธีการเหล่านี้สามารถช่วยให้การอัปเกรดโครงการของคุณเป็นไปอย่างราบรื่น
โรดแมป
แผนการวางจําหน่าย Microsoft Fabric ประกาศการอัปเดตและไทม์ไลน์ล่าสุดเนื่องจากมีการจัดเตรียมคุณลักษณะสําหรับการวางจําหน่ายในอนาคต รวมถึงมีอะไรใหม่และแผนสําหรับ Data Factory ใน Microsoft Fabric
เนื้อหาที่เกี่ยวข้อง
สําหรับข้อมูลเพิ่มเติมเกี่ยวกับบทความนี้ โปรดดูทรัพยากรต่อไปนี้:
- สถานการณ์การโยกย้ายกระแสข้อมูล
- Data Factory ใน Microsoft Fabric คืออะไร
- การรับจากรุ่นกระแสข้อมูล 1 สู่รุ่นที่ 2
- คำ ถาม ลองถามชุมชน Fabric
- คำ แนะ นำ มีส่วนช่วยปรับปรุง ผ้า