Microsoft Fabric을 사용하여 Lakehouse 구현

중급
데이터 분석가
데이터 엔지니어
데이터 과학자
Microsoft Fabric

이 학습 경로에서는 Microsoft Fabric을 사용하여 데이터 레이크하우스를 구현하는 기본 구성 요소를 소개합니다.

사전 요구 사항

기본적인 데이터 개념과 용어를 잘 알고 있어야 합니다.

이 학습 경로의 모듈

Microsoft Fabric이 한 플랫폼에서 엔터프라이즈의 분석 요구 사항을 충족하는 방법을 알아봅니다. Microsoft Fabric 및 해당 작동 방식에 대해 알아보고 분석 요구 사항에 이 솔루션을 사용하는 방법을 확인합니다.

레이크하우스는 데이터 레이크 스토리지 유연성을 데이터 웨어하우스 분석과 병합합니다. Microsoft Fabric은 단일 SaaS 플랫폼에서 포괄적인 분석을 위한 레이크하우스 솔루션을 제공합니다.

Apache Spark는 대규모 데이터 분석을 위한 핵심 기술입니다. Microsoft Fabric은 Spark 클러스터를 지원하므로 레이크하우스에서 대규모로 데이터를 분석하고 처리할 수 있습니다.

Microsoft Fabric 레이크하우스의 테이블은 Apache Spark에서 일반적으로 사용되는 Delta Lake 스토리지 형식을 기반으로 합니다. Delta 테이블의 향상된 기능을 사용하여 고급 분석 솔루션을 만들 수 있습니다.

데이터 수집은 분석에서 매우 중요합니다. Microsoft Fabric의 Data Factory는 Power Query Online을 사용하여 다단계 데이터 수집 및 변환을 시각적으로 만들기 위한 데이터 흐름을 제공합니다.

Microsoft Fabric에는 데이터 수집 및 변환 작업을 오케스트레이션하는 파이프라인을 만드는 기능을 포함하여 Data Factory 기능이 포함됩니다.

Microsoft Fabric에서 medallion 아키텍처 디자인의 잠재력을 살펴보세요. 최적화된 분석을 위해 레이크하우스의 Bronze, Silver 및 Gold 계층에서 데이터를 구성하고 변환합니다.