소개
데이터 파이프라인은 일반적으로 하나 이상의 원본에서 데이터를 추출하고 대상에 로드하며 종종 그 과정에서 데이터를 변환함으로써 전체 프로세스를 오케스트레이션하는 작업 시퀀스를 정의합니다. 파이프라인은 일반적으로 운영 데이터 저장소에서 레이크하우스, 데이터 웨어하우스 또는 SQL 데이터베이스와 같은 분석 데이터 저장소로 트랜잭션 데이터를 수집하는 ETL(추출, 변환 및 로드) 프로세스를 자동화하는 데 사용됩니다.
이미 Azure Data Factory에 친숙한 경우 Microsoft Fabric의 데이터 파이프라인에 즉시 친숙해질 것입니다. 연결된 작업의 동일한 아키텍처를 사용하여 여러 종류의 데이터 처리 작업 및 제어 흐름 논리를 포함할 수 있는 프로세스를 정의합니다. Microsoft Fabric 사용자 인터페이스에서 대화형으로 파이프라인을 실행하거나 자동으로 실행되도록 예약할 수 있습니다.