แชร์ผ่าน

งานกระแสอากาศ Apache คืออะไร

  • บทความ

หมายเหตุ

งานกระแสอากาศ Apache ขับเคลื่อนด้วย กระแสอากาศ Apache

งาน Apache Airflow เป็นตัวจัดการการจัดเรียงเวิร์กโฟลว์ของ Azure Data Factory รุ่นต่อไป เป็นวิธีที่ง่ายและมีประสิทธิภาพในการสร้างและจัดการ งานการจัดเรียงกระแส อากาศ Apache ซึ่งช่วยให้คุณสามารถเรียกใช้กราฟ Acyclic Directed (DAGs) ในระดับได้อย่างง่ายดาย เป็นส่วนหนึ่งของโรงงานข้อมูลของ Fabric ที่มอบพลังให้คุณด้วยประสบการณ์การผสานข้อมูลที่ทันสมัยเพื่อนําเข้า เตรียมและแปลงข้อมูลจากชุดแหล่งข้อมูลที่หลากหลาย เช่น ฐานข้อมูล คลังข้อมูล Lakehouse ข้อมูลแบบเรียลไทม์ และอื่นๆ

เมื่อไรที่ควรใช้ Apache Airflow

งานกระแสอากาศ Apache เสนอบริการที่มีการจัดการที่ช่วยให้ผู้ใช้สามารถสร้างและจัดการ DAG ที่ใช้ Python (กราฟ Acyclic Directed) สําหรับการจัดเรียงเวิร์กโฟลว์โดยไม่ต้องกังวลเกี่ยวกับโครงสร้างพื้นฐานพื้นฐาน หากคุณมีประสบการณ์กับ Apache Airflow หรือคุณชอบวิธีการแบบเน้นโค้ด ตัวเลือกนี้เหมาะสมที่สุด ในทางตรงกันข้าม ถ้าคุณต้องการโซลูชันแบบไม่มีโค้ดสําหรับ data orchestration ไปป์ไลน์ข้อมูลมีทางเลือกที่ใช้งานง่ายซึ่งไม่จําเป็นต้องจัดการหรือเขียนเวิร์กโฟลว์ตาม Python

คุณลักษณะหลัก

งานกระแสอากาศ Apache โฮสต์ของ Microsoft Fabric มีคุณสมบัติที่มีประสิทธิภาพมากมายรวมถึง:

คุณลักษณะหลัก งานกระแสอากาศ Apache ในผ้า ตัวจัดการการเรียงเวิร์กโฟลว์ใน Azure Data Factory
ซิงค์ Git ใช่ ใช่
เปิดใช้งาน AKV (Azure Key Vault) เป็น Backend ใช่ ใช่
ติดตั้งแพคเกจส่วนตัวตามความต้องการ ใช่ ใช่
บันทึกการวินิจฉัยและเมตริก ไม่ใช่ ใช่
ที่เก็บข้อมูล Bing ไม่ใช่ ใช่
ที่อยู่ IP คลัสเตอร์กระแสอากาศ Apache ใช่ ใช่
การปรับขนาดอัตโนมัติสําหรับการจัดการที่เก็บปริมาณงานการผลิตที่เพิ่มเข้ามา ใช่ บางส่วน
ความพร้อมใช้งานสูงสําหรับการลดการหยุดทํางาน/หยุดทํางาน ใช่ ไม่ใช่
ตัวดําเนินการเลื่อนเวลาสําหรับการระงับผู้ปฏิบัติงานที่ไม่ได้ใช้งานและเพิ่มผู้ปฏิบัติงาน ใช่ ไม่ใช่
หยุดชั่วคราวและดําเนินการต่อ TTL (เวลาในการถ่ายทอดสด) ใช่ ไม่ใช่
ประสบการณ์ SaaSified - เริ่มต้น 10 วินาที - การเขียน DAGs - การทดลองใช้งานผ้าฟรี ใช่ ไม่ใช่

ความพร้อมใช้งานของภูมิภาค (ตัวอย่างสาธารณะ)

  • ออสเตรเลียตะวันออก
  • ออสเตรเลียตะวันออกเฉียงใต้
  • บราซิลใต้
  • แคนาดาตะวันออก
  • แคนาดากลาง
  • เอเชียตะวันออก
  • สหรัฐอเมริกาภาคตะวันออก
  • เยอรมนีตอนกลางทางตะวันตก
  • ญี่ปุ่นภาคตะวันออก
  • ญี่ปุ่นภาคตะวันตก
  • ยุโรปตอนเหนือ
  • แอฟริกาใต้ตอนเหนือ
  • สหรัฐอเมริกาตอนกลางทางใต้
  • อินเดียใต้
  • เอเชียตะวันออกเฉียงใต้
  • สวีเดนตอนกลาง
  • สวิตเซอร์แลนด์ตะวันตก
  • สหราชอาณาจักรตอนใต้
  • สหราชอาณาจักรตะวันตก
  • US ตอนกลางทางตะวันตก
  • ยุโรปตะวันตก
  • สหรัฐอเมริกาตะวันตก

รุ่นกระแสอากาศ Apache ที่รองรับ

  • 2.6.3

รองรับเวอร์ชัน Python

  • 3.8.17

หมายเหตุ

การเปลี่ยนแปลงเวอร์ชัน Apache Airflow ภายใน IR ที่มีอยู่ไม่ได้รับการรองรับ แต่ทางออกที่แนะนําคือการสร้าง Airflow IR ใหม่ด้วยรุ่นที่ต้องการ

เนื้อหาที่เกี่ยวข้อง

  • เริ่มต้นใช้งานด่วน: สร้างงานการไหลของอากาศ Apache