다음을 통해 공유

잡을 위한 Delta Live Tables 파이프라인 작업 태스크

  • 아티클

작업은 태스크 간의 관계를 정의하는 절차적 접근 방식을 제공합니다. Delta Live Tables 파이프라인은 데이터 세트와 변환 간의 관계를 정의하는 선언적 접근 방식을 제공합니다. 이 페이지에서는 작업 UI, Delta Live Tables 파이프라인 UI 또는 SQL을 사용하여 트리거된 Delta Live Tables 파이프라인을 Databricks 작업에서 작업으로 실행하도록 예약하는 방법을 설명합니다.

메모

트리거된 Delta Live Tables 파이프라인은 지속적으로 실행되지 않고, 시작하려면 반드시 트리거 되어야 하는 파이프라인입니다. 파이프라인 작업은 트리거된 Delta Live Tables 파이프라인에 대한 트리거 메커니즘일 수 있습니다. 연속 파이프라인을 트리거할 필요가 없으므로 작업을 통해 트리거하는 것은 중복됩니다. 트리거 및 연속 파이프라인에 대한 자세한 내용은 트리거된 파이프라인 모드와 연속 파이프라인 모드를 참조하세요.

Jobs UI를 사용하여 Delta Live Tables 파이프라인 작업 구성

Delta Live Tables 파이프라인은 파이프라인 정의에서 소스 코드 및 컴퓨팅에 대한 모든 구성을 관리합니다.

작업에 파이프라인을 추가하려면 다음 단계를 완료합니다.

  1. 새 작업을 만들고 이름을 지정한 후 Delta Live Tables 파이프라인을 형식으로 선택합니다.
  2. 파이프라인 드롭다운 메뉴에서 기존 Delta Live Tables 파이프라인을 선택합니다.
  3. 필요에 따라 Delta Live Tables 파이프라인에서 전체 새로 고침을 트리거할 수 있습니다.

Important

파이프라인 작업에는 트리거된 파이프라인만 사용할 수 있습니다. 연속 파이프라인은 작업으로 지원되지 않습니다.

파이프라인 UI를 통해 Delta Live Tables 파이프라인을 예약 설정하기

파이프라인에 일정을 추가하면 단일 파이프라인 작업이 있는 작업이 만들어집니다. 이 UI를 사용하여 시간 기반 일정 트리거만 구성할 수 있습니다. 더 고급 트리거 옵션에 대해서는 작업 UI에서 Delta Live Tables 파이프라인 작업 구성을 참조하세요.

다음 단계를 완료하여 파이프라인 UI를 사용하여 예약된 작업에서 파이프라인 작업을 구성합니다.

  1. 사이드바에서 델타 라이브 테이블을 클릭하세요.
  2. 파이프라인 이름을 클릭합니다. 파이프라인 UI가 나타납니다.
  3. 일정클릭합니다.
    • 파이프라인에 대한 일정이 없으면 새 일정 대화 상자가 나타납니다.
    • 하나 이상의 일정이 이미 있는 경우 일정 추가클릭합니다.
  4. 작업 이름 필드에 작업의 고유한 이름을 입력합니다.
  5. (선택 사항) 일정 빈도를 업데이트합니다.
    • cron 구문을 포함하여 자세한 옵션을 보려면 고급 선택합니다.
  6. (선택 사항) 추가 옵션아래에서 파이프라인 시작, 성공 또는 실패에 대한 경고를 수신하도록 하나 이상의 전자 메일 주소를 구성합니다.
  7. 만들기클릭합니다.

메모

파이프라인이 하나 이상의 예약된 작업에 포함된 경우 일정 단추에는 일정(5)같은 기존 일정 수가 표시됩니다.

Databricks SQL에서 머티리얼라이즈드 뷰 또는 스트리밍 테이블에 일정 추가

Databricks SQL에 정의된 구체화된 뷰 및 스트리밍 테이블은 CREATE 또는 ALTER 명령에 지정된 시간 기반 예약을 지원합니다.

자세한 내용은 다음 문서를 참조하세요.