Delta Live Tables 버전 2023.43

2023년 10월 30일 ~ 2023년 11월 3일

이러한 기능 및 개선 사항은 Delta Live Tables2023.43 릴리스와 함께 릴리스되었습니다.

메모

릴리스가 단계적으로 진행됩니다. Databricks 런타임 버전을 포함한 Delta Live Tables 릴리스는 초기 릴리스 날짜 이후 일주일 이상까지 업데이트되지 않을 수 있습니다.

이 릴리스에서 사용하는 Databricks Runtime 버전

채널:

Delta Live Tables UI에서 파이프라인을 볼 때 이제 그래프 시각화 외에도 테이블 형식 보기에서 파이프라인 데이터 세트를 볼 수 있습니다. 특히 DAG가 너무 커서 그래프 보기에 맞지 않는 경우 파이프라인의 모든 데이터 세트에 대한 개요에 테이블 형식 보기를 사용할 수 있습니다. 데이터 세트 이름 및 형식과 같은 필터를 사용하여 특정 데이터 세트를 찾을 수도 있습니다. UI에서 사용할 수 있는 파이프라인 세부 정보는 무엇인가요?.
이 릴리스에서는 동일한 파이프라인에서 table을 참조할 때 LIVE 키워드를 사용하지 않으면 경고 메시지가 나타납니다.
이제 여러 원본 스트림에서 스트리밍 table에 데이터를 쓸 수 있어, 전체 refresh이 필요 없이 기존 스트리밍 table에 데이터를 추가하거나, 기록 데이터가 누락된 스트리밍 table에 데이터를 백필하고, remove 스트리밍 원본을 추가할 수 있습니다. 여러 원본 스트림에서 스트리밍 table 로 쓰기 위해 추가 흐름을 사용하세요.
이제 Unity Catalog-enabled 파이프라인을 실행하는 클러스터에 허용된 init 스크립트을 추가할 수 있습니다.