แชร์ผ่าน


เลคเฮ้าส์ใน Microsoft Fabric คืออะไร

Microsoft Fabric Lakehouse เป็นแพลตฟอร์มสถาปัตยกรรมข้อมูลสําหรับจัดเก็บ จัดการ และวิเคราะห์ข้อมูลที่มีโครงสร้างและไม่มีโครงสร้างในตําแหน่งที่ตั้งเดียว เป็นโซลูชันที่ยืดหยุ่นและปรับขนาดได้ซึ่งช่วยให้องค์กรสามารถจัดการข้อมูลจํานวนมากโดยใช้เครื่องมือและเฟรมเวิร์กต่าง ๆ เพื่อประมวลผลและวิเคราะห์ข้อมูลนั้น ผสานรวมกับเครื่องมือการจัดการข้อมูลและการวิเคราะห์อื่น ๆ เพื่อให้โซลูชันที่ครอบคลุมสําหรับวิศวกรรมและการวิเคราะห์ข้อมูล

Gif of overall lakehouse experience.

จุดสิ้นสุดการวิเคราะห์ของ Lakehouse SQL

เลคเฮ้าส์สร้างเลเยอร์ที่ให้บริการโดยการสร้างจุดสิ้นสุดการวิเคราะห์ SQL โดยอัตโนมัติและแบบจําลองความหมายเริ่มต้นในระหว่างการสร้าง ฟังก์ชันการดูผ่านใหม่นี้ช่วยให้ผู้ใช้สามารถทํางานบนตาราง Delta ในทะเลสาบได้โดยตรงเพื่อมอบประสบการณ์ที่ไร้แรงเสียดทานและมีประสิทธิภาพตั้งแต่การนําเข้าข้อมูลไปจนถึงการรายงาน

สิ่งสําคัญคือต้องทราบว่า จุด สิ้นสุดการวิเคราะห์ SQL เป็นประสบการณ์แบบอ่านอย่างเดียวและไม่สนับสนุนพื้นที่พื้นผิว T-SQL แบบเต็มของคลังข้อมูลทางทรานแซคชัน

หมายเหตุ

เฉพาะตารางในรูปแบบ Delta จะพร้อมใช้งานในจุดสิ้นสุดการวิเคราะห์ SQL ไม่สามารถสอบถาม Parquet, CSV และรูปแบบอื่น ๆ ได้โดยใช้จุดสิ้นสุดการวิเคราะห์ SQL ถ้าคุณไม่เห็นตารางของคุณ คุณจะต้องแปลงเป็นรูปแบบ Delta

การค้นหาและการลงทะเบียนตารางโดยอัตโนมัติ

การค้นพบและการลงทะเบียนตารางอัตโนมัติเป็นคุณลักษณะของเลคเฮ้าส์ที่มีไฟล์ที่ได้รับการจัดการอย่างเต็มที่สําหรับประสบการณ์การใช้งานตารางสําหรับวิศวกรข้อมูลและนักวิทยาศาสตร์ข้อมูล คุณสามารถวางไฟล์ลงในพื้นที่จัดการของเลคเฮ้าส์และระบบจะตรวจสอบโดยอัตโนมัติสําหรับรูปแบบที่มีโครงสร้างที่ได้รับการสนับสนุนและลงทะเบียนลงใน metastore ด้วยเมตาดาต้าที่จําเป็นเช่นชื่อคอลัมน์รูปแบบการบีบอัดและอื่น ๆ (ในขณะนี้ รูปแบบที่ได้รับการสนับสนุนคือ ตาราง Delta) จากนั้นคุณสามารถอ้างอิงไฟล์เป็นตารางและใช้ไวยากรณ์ SparkSQL เพื่อโต้ตอบกับข้อมูลได้

โต้ตอบกับรายการเลคเฮ้าส์

วิศวกรข้อมูลสามารถโต้ตอบกับเลคเฮ้าส์และข้อมูลภายในเลคเฮ้าส์ได้หลายวิธี:

  • ตัวสํารวจของเลคเฮ้าส์: การสํารวจคือ หน้าการโต้ตอบหลักของเลคเฮ้าส์ คุณสามารถโหลดข้อมูลในเลคเฮ้าส์ของคุณได้ สํารวจข้อมูลในเลคเฮ้าส์โดยใช้ตัวสํารวจวัตถุ ตั้งค่าป้ายชื่อ MIP และสิ่งอื่น ๆ เรียนรู้เพิ่มเติมเกี่ยวกับประสบการณ์การใช้งาน explorer: นําทางตัวสํารวจ Fabric Lakehouse

  • สมุดบันทึก: วิศวกรข้อมูลสามารถใช้สมุดบันทึกเพื่อเขียนโค้ดเพื่ออ่าน แปลง และเขียนโดยตรงไปยัง Lakehouse เป็นตารางและ/หรือโฟลเดอร์ คุณสามารถเรียนรู้เพิ่มเติมเกี่ยวกับวิธีการใช้โน้ตบุ๊คสําหรับเลคเฮ้าส์: สํารวจข้อมูลในเลคเฮ้าส์ของคุณด้วยโน้ตบุ๊ค และ วิธีใช้โน้ตบุ๊คเพื่อโหลดข้อมูลลงในเลคเฮ้าส์ของคุณ

  • ไปป์ไลน์: วิศวกรข้อมูลสามารถใช้เครื่องมือรวมข้อมูล เช่น เครื่องมือคัดลอกไปป์ไลน์เพื่อดึงข้อมูลจากแหล่งอื่นและลงที่ใน Lakehouse ได้ ค้นหาข้อมูลเพิ่มเติมเกี่ยวกับวิธีการใช้กิจกรรมการคัดลอก: วิธีการคัดลอกข้อมูลโดยใช้กิจกรรมการคัดลอก

  • ข้อกําหนดงานของ Apache Spark: วิศวกรข้อมูลสามารถพัฒนาแอปพลิเคชันที่มีประสิทธิภาพและประสานการดําเนินการของงาน Spark ที่คอมไพล์แล้วใน Java, Scala และ Python เรียนรู้เพิ่มเติมเกี่ยวกับ Spark jobs: ข้อกําหนดงาน Apache Spark คืออะไร

  • กระแสข้อมูล รุ่น 2: วิศวกรข้อมูลสามารถใช้ กระแสข้อมูล รุ่น 2 เพื่อนําเข้าและเตรียมข้อมูลของพวกเขาได้ ค้นหาข้อมูลเพิ่มเติมเกี่ยวกับการโหลดข้อมูลโดยใช้กระแสข้อมูล: สร้างกระแสข้อมูลแรกของคุณเพื่อรับและแปลงข้อมูล

เรียนรู้เพิ่มเติมเกี่ยวกับวิธีต่างๆ ในการโหลดข้อมูลลงในเลคเฮ้าส์ของคุณ: ตัวเลือกในการรับข้อมูลลงใน Fabric Lakehouse

ทํางานหลายอย่างพร้อมเลคเฮ้าส์

ประสบการณ์การทํางานหลายอย่างพร้อมกันมีการออกแบบแท็บเบราว์เซอร์ที่ช่วยให้คุณสามารถเปิดและสลับระหว่างหลายรายการได้อย่างราบรื่นช่วยให้คุณสามารถจัดการ data lakehouse ของคุณได้อย่างมีประสิทธิภาพมากขึ้นกว่าที่เคย ไม่มีการสลับระหว่างหน้าต่างที่แตกต่างกันหรือสูญเสียการติดตามงานของคุณอีกต่อไป เลคเฮ้าส์มอบประสบการณ์การทํางานหลายอย่างที่ปรับปรุงใหม่เพื่อให้การเดินทางในการจัดการข้อมูลของคุณมีประสิทธิภาพและใช้งานง่ายที่สุดด้วยความสามารถดังต่อไปนี้:

  • รักษาการดําเนินการที่ทํางานอยู่: คุณสามารถอัปโหลดหรือเรียกใช้การดําเนินการโหลดข้อมูลในแท็บหนึ่ง และตรวจสอบงานอื่นในแท็บอื่นได้ การทํางานแบบหลายงานที่ปรับปรุงประสิทธิภาพแล้ว การดําเนินการที่กําลังทํางานอยู่จะไม่ถูกยกเลิกเมื่อคุณนําทางไปมาระหว่างแท็บต่างๆ คุณสามารถมุ่งเน้นไปที่งานของคุณโดยไม่หยุดชะงัก

  • รักษาบริบทของคุณ: วัตถุที่เลือก ตารางข้อมูล หรือไฟล์ยังคงเปิดและพร้อมใช้งานเมื่อคุณสลับระหว่างแท็บ บริบทของ data lakehouse ของคุณจะอยู่ที่ปลายนิ้วของคุณเสมอ

  • รายการที่ไม่บล็อกจะโหลดใหม่: กลไกการโหลดใหม่ที่ไม่บล็อกสําหรับไฟล์และรายการตารางของคุณ คุณสามารถทํางานต่อไปได้ในขณะที่รายการรีเฟรชในพื้นหลัง เพื่อให้แน่ใจได้ว่าคุณมีข้อมูลล่าสุดในขณะที่มอบประสบการณ์ที่ราบรื่นและไม่หยุดชะงักให้กับคุณ

  • การแจ้งเตือนที่กําหนดไว้อย่างชัดเจน: การแจ้งเตือน toast ระบุเลคเฮ้าส์ที่พวกเขามาจากไหน ทําให้ง่ายต่อการติดตามการเปลี่ยนแปลงและการอัปเดตในสภาพแวดล้อมแบบหลายงานของคุณ

การออกแบบที่สามารถเข้าถึงได้ของเลคเฮ้าส์

การเข้าถึงมีความสําคัญสูงสุดเสมอเพื่อให้แน่ใจว่าเลคเฮ้าส์นั้นรวมและใช้งานง่ายสําหรับทุกคน นี่คือความคิดริเริ่มหลักที่เราได้ดําเนินการเพื่อสนับสนุนการช่วยสําหรับการเข้าถึง:

  • ความเข้ากันได้ของโปรแกรมอ่านหน้าจอ: คุณสามารถทํางานได้อย่างราบรื่นกับโปรแกรมอ่านหน้าจอยอดนิยม ช่วยให้ผู้ใช้ที่มีความบกพร่องทางการมองเห็นสามารถนําทางและโต้ตอบกับแพลตฟอร์มของเราได้อย่างมีประสิทธิภาพ

  • การออกแบบตอบสนองของข้อความแบบเรียงหน้า ใหม่ที่ปรับให้เข้ากับขนาดหน้าจอและการวางแนวที่แตกต่างกัน การเรียงหน้าข้อความและเนื้อหาใหม่แบบไดนามิกทําให้ผู้ใช้สามารถดูและโต้ตอบกับแอปพลิเคชันของเราบนอุปกรณ์ที่หลากหลายได้ง่ายขึ้น

  • การนําทางแป้นพิมพ์: ปรับปรุงการนําทางแป้นพิมพ์เพื่อให้ผู้ใช้สามารถเคลื่อนย้ายผ่านเลคเฮ้าส์ได้โดยไม่ต้องใช้เมาส์เพื่อเพิ่มประสบการณ์สําหรับผู้ที่ทุพพลภาพทางมอเตอร์

  • ข้อความทางเลือกสําหรับรูปภาพ: รูปภาพทั้งหมดในขณะนี้มีข้อความแสดงแทนที่เป็นคําอธิบาย ทําให้โปรแกรมอ่านหน้าจอสามารถสื่อข้อมูลที่มีความหมายได้

  • เขตข้อมูลฟอร์มและป้ายชื่อ: เขตข้อมูลฟอร์มทั้งหมดมีป้ายชื่อที่เกี่ยวข้อง ทําให้การป้อนข้อมูลสําหรับทุกคนง่ายขึ้น รวมถึงเขตข้อมูลที่ใช้โปรแกรมอ่านหน้าจอด้วย

ในภาพรวมนี้ คุณจะเข้าใจพื้นฐานของเลคเฮ้าส์ ไปยังบทความถัดไปเพื่อเรียนรู้วิธีการสร้างและใช้เลคเฮาส์ของคุณเอง: