다음을 통해 공유


2024년 Databricks SQL 릴리스 정보

다음은 2024년 1월부터 12월까지 Databricks SQL의 개선 사항 및 업데이트에 대해 간략하게 설명합니다.

2024년 11월 21일

SQL 웨어하우스 시스템 tables (공개 프리뷰)

  • system.compute.warehouses table SQL 웨어하우스가 생성, 편집 및 삭제될 때 기록됩니다. table 사용하여 웨어하우스 이름, 유형, 크기, 채널, 태그, 자동 중지 및 자동 크기 조정 설정을 비롯한 웨어하우스 설정의 변경 내용을 모니터링할 수 있습니다. 창고 시스템 table 참조를 확인하세요.

데이터 검색

  • Catalog 탐색기의 계보 탭이 엔터티 필터링을 위한 향상된 UI로 다시 디자인되었습니다.

2024년 11월 13일

레거시 대시보드:

  • 이중 축 및 다중 필드 축 차트에 대한 템플릿 기반 도구 설명이 자세한 내용을 표시하지 않는 문제 (where)이 해결되었습니다.

2024년 11월 6일

Databricks SQL 스트리밍 tables 및 구체화된 views 스케줄에 대한 사람이 읽을 수 있는 지원

이제 사용자는 사람이 읽을 수 있는 구문을 사용하여 CRON 예약 대신에 스트리밍 tables 및 물질화된 views의 일정을 시작, 생성 및 변경할 수 있습니다. ALTER MATERIALIZED VIEW, ALTER STREAMING TABLE, CREATE MATERIALIZED VIEWCREATE STREAMING TABLE참조하세요.

스트리밍 tables 이제 시간 이동 쿼리를 지원합니다.

이제 시간 여행을 사용하여 타임스탬프 또는 table 버전(트랜잭션 로그에 기록된 대로)을 기반으로 이전 table 버전을 쿼리할 수 있습니다. 시간 이동 쿼리를 사용하기 전에 스트리밍 tablerefresh 수 있습니다. Delta Lake의 시간 여행이란 무엇인가요?.

구체화된 views의 시간 이동 쿼리는 지원되지 않습니다.

2024년 10월 31일

사용자 인터페이스 업데이트

새 SQL 편집기 (공개 미리보기)

  • 이제 바로 가기 키 Command(또는 Ctrl) + Shift + Enter사용하여 활성 SQL 쿼리를 실행할 수 있습니다.
  • 이제 parameters 입력 영역에는 표시 window외부로 텍스트가 확장되면 스크롤 막대가 표시됩니다.
  • 쿼리 프로필 세부 정보 페이지가 완전히 열리지 않는 문제를 해결했습니다.
  • 이제 탭 제목에 새 이름을 입력하여 쿼리의 이름을 바꿀 수 있습니다.
  • 이제 이전에 저장한 적이 없는 쿼리에 대해 일정 단추가 비활성화되었습니다.

2024년 10월 24일

AI/BI 도구에 대한 릴리스 정보

AI/BI 대시보드 및 AI/BI Genie에 대한 릴리스 정보는 AI/BI 릴리스 정보로 이동했습니다. 향후 릴리스 및 업데이트가 문서화될 예정입니다.

2024년 10월 17일

알림 대상을 이제 일반적으로 사용할 수 있습니다.

작업 영역 사용자가 경고, Databricks 작업 및 AI/BI 대시보드 일정과 같은 특정 워크플로에 추가하여 이벤트가 실행되면 이메일 또는 웹후크를 보낼 수 있는 알림 대상을 만들고 구성할 수 있습니다. 알림 대상 관리는 를 참조하세요.

2024년 10월 10일

이제 Databricks SQL에서 구체화된 views 및 스트리밍 tables이 일반적으로 제공됩니다.

스트리밍 tables은 클라우드 스토리지와 메시지 큐에서 데이터를 점진적으로 수집할 수 있게 하며, 구체화된 views은 새 데이터가 도착할 때마다 자동으로 점진적으로 업데이트되는 미리 계산된 views입니다. Databricks SQL 구체화된 사용하고 Databricks SQL스트리밍 사용하여 데이터 로드 참조하세요.

쿼리 인사이트

2024년 10월 3일

서버리스 SQL 웨어하우스 지원 확장

서버리스 SQL 웨어하우스는 이제 swedencentral 지역에서 사용할 수 있습니다. 지역 가용성이 제한된 기능을참조하세요.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

Catalog 탐색기

  • AI에서 생성된 주석은 이제 catalogs, 스키마, volumes, 모델 및 함수에 지원되며 사용자는 인라인 채팅 도우미를 사용하여 의견을 편집할 수 있습니다.

SQL AI 함수vector_search() 함수는 이제 공개 미리 보기에서 사용할 수 있습니다. vector_search 함수 참조

2024년 9월 26일

서버리스 SQL 웨어하우스 지원 확장

서버리스 SQL 웨어하우스는 이제 francecentral 지역에서 사용할 수 있습니다. 제한된 지역 가용성 기능을참조하세요.

2024년 9월 11일

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

SQL 편집기

이제 SQL 편집기에서 명명된 매개 변수 표식 구문을 사용할 수 있습니다. 명명된 매개 변수 표식 구문은 SQL 편집기, Notebook 및 AI/BI 대시보드에서 사용할 수 있습니다. 쿼리 parameters와 작업을 참조하세요.

쿼리 및 레거시 대시보드

SQL 쿼리 및 레거시 대시보드의 경우 삭제된 항목이 목록 페이지에 더 이상 표시되지 않습니다. 작업 영역 휴지통 폴더에서 삭제된 항목을 찾습니다. 작업 영역 관리자는 모든 사용자의 휴지통 폴더에서 삭제된 항목을 볼 수 있습니다.

2024년 9월 5일

2024.40의 변경 내용

Databricks SQL 버전 2024.40에는 다음과 같은 동작 변경, 새로운 기능 및 개선 사항이 포함됩니다.

동작 변경

  • views 기본 schema 바인딩 모드로 변경

    Views은(는) 이제 일반 캐스팅 규칙과 함께 schema 보정을 사용하여 기본 쿼리의 schema 변경 사항에 적응합니다. 이는 뷰를 참조할 때 안전한 캐스트를 수행할 수 없을 때 오류를 발생시킨 BINDING 모드의 이전 기본값에서 변경된 것입니다.

    CREATE VIEW캐스트 함수참조하세요.

  • 부울 식 외부에서NOT 대신 문서화가 안 된 ! 구문을 사용할 수 없습니다.

    이 릴리스에서는 !를 부울 식 외부에서 NOT의 동의어로 사용하는 것이 더 이상 허용되지 않습니다. 예를 들어, 다음과 같은 문장: CREATE ... IF ! EXISTS, IS ! NULL, ! NULLcolumn 또는 필드 속성, ! IN! BETWEEN는 다음과 같은 문장으로 교체해야 합니다: CREATE ... IF NOT EXISTS, IS NOT NULL, a NOT NULLcolumn 또는 필드 속성, NOT INNOT BETWEEN.

    이렇게 변경하면 일관성이 보장되고 SQL 표준과 일치하며 SQL 이식성이 높아집니다.

    부울 접두사 연산자!(예: !is_mgr 또는 !(true AND false))은 이 변경의 영향을 받지 않습니다.

  • views 문서화되지 않은 column 정의 구문을 허용하지 않습니다.

    Databricks는 CREATE VIEW를 지원하며, 이에 명명된 columns 및 column 주석이 포함됩니다. 이전에는 column 형식, NOT NULL 제약 조건 또는 DEFAULT 사양이 허용되었습니다. 이 릴리스에서는 더 이상 이 구문을 사용할 수 없습니다.

    이 변경은 일관성을 보장하고, SQL 표준에 부합하며, 향후 향상된 기능을 지원합니다.

  • 잘못된 columnCHECKconstraint 추가하면 UNRESOLVED_COLUMN.WITH_SUGGESTION 오류 클래스

    더 유용한 오류 메시지를 제공하기 위해 Databricks Runtime 15.3 이상에서는 잘못된 column 이름을 참조하는 CHECKconstraint를 포함하는 ALTER TABLE ADD CONSTRAINT 문이 UNRESOLVED_COLUMN.WITH_SUGGESTION 오류 클래스를 반환합니다. 이전에는 INTERNAL_ERROR이 반환되었습니다.

새로운 기능 및 개선 사항

  • ALTER TABLE 를 사용하여 UniForm Iceberg를 활성화하십시오

    이제 데이터 파일을 다시 작성하지 않고 기존 tables UniForm Iceberg를 사용하도록 설정할 수 있습니다. 기존 에서 Iceberg 읽기를 사용하도록 설정하세요.

  • UTF-8 유효성 검사 함수

    이 릴리스에서는 UTF-8 문자열의 유효성을 검사하기 위한 다음 함수를 소개합니다.

    • is_valid_utf8 문자열이 유효한 UTF-8 문자열인지 여부를 확인했습니다.
    • make_valid_utf8 대체 문자를 사용하여 잠재적으로 잘못된 UTF-8 문자열을 유효한 UTF-8 문자열로 변환합니다.
    • validate_utf8 입력이 유효한 UTF-8 문자열이 아니면 오류가 발생합니다.
    • 입력이 유효한 UTF-8 문자열이 아닐 경우, try_validate_utf8NULL를 반환합니다.
  • to_avro 및 from_avro 함수

    to_avrofrom_avro 함수를 사용하면 SQL 형식을 Avro 이진 데이터로 변환하고 다시 변환할 수 있습니다.

  • try_url_decode 함수

    이 릴리스에서는 URL로 인코딩된 문자열을 디코딩하는 try_url_decode 함수를 소개합니다. 문자열이 올바른 형식이 아니면 함수는 오류를 발생시키는 대신 NULL 반환합니다.

  • 필요에 따라 최적화 프로그램에서 강제되지 않은 외래 키 제약 조건 의존하도록 허용합니다.

    쿼리 성능을 향상시키기 위해 이제 CREATE을(를) 만들 때 제약 조건에 키워드를 지정할 수 있으며, 을(를) ALTER 수 있습니다.

  • 체크 제약 조건 table 기능 제거에 대한 지원

    선택적 덮어쓰기 기능은 이제 데이터를 삭제하는 작업과 새 데이터를 처리하는 작업을 replaceWhere 및 insert을 사용하여 병렬로 실행하여 쿼리 성능과 클러스터 사용률을 향상합니다.

  • 선택적 덮어쓰기를 위한 병렬 처리된 작업 실행

    replaceWhere 사용하는 선택적 덮어쓰기는 이제 데이터를 삭제하고 새 데이터를 병렬로 insert 작업을 실행하여 쿼리 성능 및 클러스터 사용률을 향상합니다.

  • 선택적 덮어쓰기 사용하여 변경 데이터 피드의 성능 향상

    변경 데이터 피드가 적용된 상황에서 tables을 사용하여 replaceWhere을 선택적으로 덮어쓸 때, 삽입된 데이터에 대한 별도의 변경 데이터 파일을 더 이상 작성하지 않습니다. 이러한 작업은 기본 Parquet 데이터 파일에 있는 숨겨진 _change_typecolumn를 사용하여 쓰기 증폭 없이 변경을 기록합니다.

  • COPY INTO 명령 대한 쿼리 대기 시간이 향상되었습니다.

    이 릴리스에는 COPY INTO 명령에 대한 쿼리 대기 시간을 개선하는 변경 내용이 포함되어 있습니다. 이러한 개선은 RocksDB 상태 저장소에서 상태를 비동기식으로 로드하여 구현됩니다. 이 변경으로 이미 수집된 파일이 많은 쿼리와 같이 상태가 큰 쿼리의 시작 시간이 향상됩니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

시각화

  • 이제 누적 차트에 대해서만 도구 설명 합계가 표시됩니다.

2024년 8월 22일

시각화

그룹화 및 다중 필드 구성의 경우, 이제 차트 요소를 마우스로 가리킬 때 툴팁에 합계가 표시됩니다.

2024년 8월 15일

시각화

페이지 크기를 변경한 후 table 시각화의 행 번호가 update 않는 where 문제가 해결되었습니다.

데이터 검색

이제 Unity Catalogtables에서 중첩된 복합 column 형식을 확장하고 축소하는 기능을 지원합니다.

2024년 8월 1일

시각화:

  • 이제 필터링으로 인해 데이터가 변경되면 Table 정렬이 유지됩니다.

SQL 편집기:

  • 쿼리의 마지막 줄과 결과 출력 사이에 안쪽 여백을 추가하여 가독성을 향상했습니다.

2024년 7월 25일

Databricks REST API:

  • 쿼리, 경고, 데이터 원본 및 사용 권한을 관리하기 위한 API가 변경되었습니다. 레거시 버전은 6개월 동안 계속 지원됩니다. 이 전환 기간은 이전 버전이 단계적으로 중단되기 전에 애플리케이션 및 통합을 새 버전으로 마이그레이션할 수 있는 충분한 시간을 제공하기 위한 것입니다. 최신 Databricks SQL API 버전 참조하세요.

2024년 7월 18일

사용자 인터페이스 업데이트

Catalog 탐색기:

  • 이제 catalog만들 때 작업 영역 바인딩, catalog 권한 및 메타데이터를 설정하는 데 새 catalog 구성 마법사를 사용할 수 있습니다.

SQL Warehouse 모니터링:

  • CAN MONITOR 권한은 이제 일반적으로 사용 가능합니다. 권한 있는 사용자가 연결된 쿼리 기록 및 쿼리 프로필을 포함하여 SQL 웨어하우스를 모니터링할 수 있습니다. 벡터 검색 엔드포인트 ACL을 참조하십시오.

2024년 7월 11일

Databricks SQL 버전 2024.35 사용 가능

출시 일정: 2024.35 미리 보기 출시: 7월 9일부터 7월 15일까지

2024.35의 변경 내용

드롭 기능을 사용하여 column 매핑 비활성화

이제 DROP FEATURE을 사용하여 Delta tables에서 column 매핑을 비활성화하고 table 프로토콜을 강등할 수 있습니다. 매핑사용하지 않도록 설정하는 참조하세요.

공개 미리 보기의 Variant 형식 구문 및 함수

이제 Spark DataFrames 및 SQL에서 VARIANT 형식으로 반구조화된 데이터 작업을 위한 기본 제공 Apache Spark 지원을 사용할 수 있습니다. 쿼리 변형 데이터참조하세요.

Delta Lake의 공개 미리 보기에서 변수 유형 지원

이제 Delta Lake에서 지원되는 반구조화된 데이터를 tables에 VARIANT을 사용하여 저장할 수 있습니다. Delta Lake의 Variant 지원을 확인하세요.

views 내 다양한 schema 진화 모드 지원

CREATE VIEWALTER VIEW 이제 schema 바인딩 모드를 set 기본 개체의 schema 변경 내용을 처리하는 방법을 views 향상할 수 있습니다. 이 기능은 views이(가) 기본 개체에서 발생하는 schema의 변화를 수용하거나 적응할 수 있게 합니다. 개체 정의 수정으로 인한 쿼리 schema 변경 내용을 해결합니다.

일부 window 함수의 성능 향상

이 릴리스에는 일부 Spark window 함수, 특히 ORDER BY 절 또는 window_frame 매개 변수를 포함하지 않는 함수의 성능을 향상시키는 변경 내용이 포함되어 있습니다. 이러한 경우 시스템은 쿼리를 다시 작성하여 집계 함수를 사용하여 실행할 수 있습니다. 이렇게 변경하면 부분 집계를 사용하고 window 함수를 실행하는 오버헤드를 방지하여 쿼리를 더 빠르게 실행할 수 있습니다. Spark 구성 매개 변수 spark.databricks.optimizer.replaceWindowsWithAggregates.enabled은 이 최적화를 제어하며 기본값은 set에서 true입니다. 이 최적화를 해제하려면 setspark.databricks.optimizer.replaceWindowsWithAggregates.enabledfalse로 설정하십시오.

추가된 try_mod 함수에 대한 지원

이 릴리스에서는 PySpark try_mod() 함수에 대한 지원을 추가합니다. 이 함수는 두 개의 숫자 values나누어 정수 나머지의 ANSI SQL 호환 계산을 지원합니다. divisor 인수가 0이면 try_mod() 함수는 예외를 throw하는 대신 null을 반환합니다. mod 또는 %대신 try_mod() 함수를 사용할 수 있습니다. 이 함수는 divisor 인수가 0이고 ANSI SQL을 사용하는 경우 예외를 throw합니다.

사용자 인터페이스 업데이트

SQL 편집기:

이제 SQL 편집기에서 인라인 도우미를 사용할 수 있습니다. 편집기 상자에서 도우미 아이콘을 클릭하여 입력을 전환합니다. 영어로 질문이나 메모를 입력한 다음 Enter(쿼리를 실행하는 Shift+Enter가 아님)를 눌러 편집기에서 직접 다른 보기로 응답을 generate.

플랫폼:

이제 알림 대상에 대한 API를 사용할 수 있습니다. 이제 경고 및 작업 실행 알림에 대한 웹후크 및 전자 메일 대상을 프로그래밍 방식으로 관리할 수 있습니다. 알림 대상참조하세요.

2024년 7월 4일

Databricks SQL 버전 2024.30 사용 가능

출시 일정: 2024.30 미리 보기 출시: 7월 9일부터 7월 15일까지

2024.30의 변경 내용

레이크하우스 페더레이션은 일반 공급 상태에 있습니다.

Lakehouse Federation 커넥터는 다음 데이터베이스 유형 전체에 대해 이제 일반 공급(GA)됩니다.

  • MySQL
  • PostgreSQL
  • Amazon Redshift
  • 눈송이
  • Microsoft SQL Server
  • Azure Synapse(SQL Data Warehouse)
  • Databricks

이 릴리스에서는 다음과 같은 향상된 기능도 소개합니다.

  • SnowflakeMicrosoft SQL Server 커넥터에서 SSO(Single Sign-On) 인증을 지원합니다.

  • 서버리스 컴퓨팅 환경에서 SQL Server 커넥터에 대한 Azure Private Link 지원. 3단계:프라이빗 엔드포인트 규칙 만들기를 참조하세요.

  • 추가 푸시다운(문자열, 수학, 기타 함수)을 지원합니다.

  • 다양한 쿼리 셰이프에서 푸시다운 성공률이 향상되었습니다.

  • 추가 푸시다운 디버깅 기능:

    • EXPLAIN FORMATTED 출력에는 푸시다운된 쿼리 텍스트가 표시됩니다.
    • 쿼리 프로필 UI는 푸시다운된 쿼리 텍스트, 연결된 노드 식별자 및 JDBC 쿼리 실행 시간(상세 모드)을 표시합니다. 시스템 생성 페더레이션 쿼리보기를 참조하세요.

DESCRIBE HISTORY은(#는) 이제 액체 클러스터링을 사용하는 tables에 대한 클러스터링 columns을/를 표시합니다.

DESCRIBE HISTORY 쿼리를 실행하면, 기본적으로 operationParameterscolumn가 CREATE OR REPLACEOPTIMIZE 작업에 대한 clusterBy 필드를 표시합니다. 액체 클러스터링을 사용하는 Delta table의 경우, clusterBy 필드는 table의 클러스터링 columns로 채워집니다. table 액체 클러스터링을 사용하지 않는 경우 필드는 비어 있습니다.

기본 및 외장 키에 대한 지원은 일반적으로 사용할 수 있습니다.

Databricks 런타임의 기본 및 외장 키에 대한 지원은 일반적으로 사용할 수 있습니다. GA 릴리스에는 기본 키와 외장 키를 사용하는 데 필요한 권한에 대한 다음과 같은 변경 내용이 포함되어 있습니다.

  • 외래 키를 정의하려면 외래 키가 참조하는 기본 키가 있는 table에 대해 SELECT 권한이 있어야 합니다. 이전에 필요했던 기본 키를 사용하여 table 소유할 필요가 없습니다.
  • CASCADE 절을 사용하여 기본 키를 삭제해도 기본 키를 참조하는 외래 키를 정의하는 tables에 대한 권한은 불필요합니다. 이전에 참조 tables을 소유해야 했습니다.
  • 이제 제약 조건이 포함된 table 삭제하려면 제약 조건을 포함하지 않는 tables 삭제하는 것과 동일한 권한이 필요합니다.

tables 또는 views기본 및 외세 키를 사용하는 방법을 알아보려면 CONSTRAINT 절, ADD CONSTRAINT 절DROP CONSTRAINT 절참조하세요.

Liquid 클러스터링이 GA인 경우

이제 Liquid 클러스터링에 대한 지원이 Databricks Runtime 15.2 이상에서 일반적으로 제공됩니다. 참조하여 델타 tables에 액체 클러스터링을 사용하세요.

형식 확대는 공개 미리 보기로 제공됩니다.

이제 Delta Lake에서 지원하는 tables 형식 확대를 사용하도록 설정할 수 있습니다. 형식 확장이 활성화된 Tables 기본 데이터 파일을 다시 작성하지 않고도 columns 형식을 더 넓은 데이터 형식으로 변경할 수 있습니다. 형식 확대참조하세요.

SQL 병합 구문에 진화 절항 Schema이 추가됨

이제 WITH SCHEMA EVOLUTION 절을 SQL 병합 문에 추가하여 작업에 대한 schema 진화를 사용하도록 설정할 수 있습니다. 병합에 대한 진화 구문을 참조하세요.

Vacuum 재고 지원

이제 Delta table에서 VACUUM 명령을 실행할 때 고려할 파일 목록을 지정할 수 있습니다. OSS Delta 문서를 참조하세요.

Zstandard 압축 함수 지원

이제 zst_compress, zstd_decompresstry_zstd_decompress 함수를 사용하여 BINARY 데이터를 압축 및 압축 해제할 수 있습니다.

이제 SQL UI의 쿼리 계획이 PhotonWriteStage를 올바르게 표시합니다.

SQL UI에 표시되면 쿼리 계획의 write 명령이 PhotonWriteStage 연산자로 잘못 표시되었습니다. 이 릴리스에서는 PhotonWriteStage 스테이지로 표시하도록 UI가 업데이트됩니다. 이는 UI 변경에만 해당하며 쿼리 실행 방식에는 영향을 주지 않습니다.

사용자 인터페이스 업데이트

API 지원:

  • 이제 REST API를 사용하여 알림 대상을 관리할 수 있습니다. 알림 대상은참조하세요.

2024년 6월 27일

Databricks SQL의 행 필터 및 Column 마스크, 물리적 views 및 스트리밍 tables 기능이 공개 미리 보기로 제공됩니다.

Databricks SQL의 행 필터 및 마스크, 구체화된 및 스트리밍 은 공개 미리 보기입니다. 공개 미리 보기 릴리스에는 다음과 같은 변경 내용이 포함됩니다.

  • 행 필터 및 column 마스크를 Databricks SQL 구체화된 뷰 또는 스트리밍 table에 추가할 수 있습니다.

    • 행 필터 및 column 마스크를 포함하는 Databricks SQL에서 구체화된 views 또는 스트리밍 tables을 tables에서 정의할 수 있습니다.

    CREATE MATERIALIZED VIEWCREATE STREAMING TABLE참조하세요.

사용자 인터페이스 업데이트

시각화:

  • 많은 데이터 요소가 있는 원형, 분산형, 열 지도 차트를 마우스로 가리킬 때 도구 설명을 표시하는 인터랙션이 향상되었습니다.

Catalog 탐색기:

  • 개선된 Catalog 탐색기 UI를 사용하면 빠른 액세스 보기에서 최근 Unity Catalog 자산을 더 쉽게 검색하고 즐겨찾기에 추가할 수 있습니다. 탐색 환경도 간소화되어 화면의 왼쪽 위 모서리에 있는 설정 아이콘설정 사용하여 컴퓨팅, 스토리지, credentials, connections, DBFS 및 관리 세부 정보를 탐색할 수 있습니다. 델타 공유, 클린 룸 및 외부 데이터에는 이제 전용 페이지가 있습니다.

2024년 6월 6일

Databricks SQL의 구체화된 views 및 스트리밍 tables의 수정사항

다음 REFRESH 작업이 실행되기 전까지 Databricks SQL에서 ALTER SCHEDULE 쿼리의 구체화된 views 및 스트리밍 tables에 영향을 미치는 문제를 수정했습니다. 이제 ALTER SCHEDULE 쿼리가 즉시 적용됩니다. 구체화된 뷰 새로 고침 일정을 참조하세요.

Databricks SQL의 구체화된 views 및 스트리밍 tables이 공개 미리 보기로 제공됩니다.

Databricks SQL의 구체화된 views 및 스트리밍 tables은 공개 미리 보기로, 모든 고객이 사용할 수 있습니다. 공개 미리 보기 릴리스에는 다음과 같은 변경 내용이 포함됩니다.

  • 이제 Databricks SQL에서 구체화된 views 및 스트리밍 tablesREFRESH 기본적으로 동기적입니다. REFRESH(MATERIALIZED VIEW 또는 STREAMING TABLE)참조하세요.

    • Databricks SQL 구체화된 뷰 또는 스트리밍 table의 refresh 작업 중에 발생하는 오류는 SQL 편집기에서 반환됩니다.

    Databricks SQL에서 구체화된 및 스트리밍 사용하는 방법을 알아보려면 Databricks SQL 구체화된 사용하고 Databricks SQL스트리밍 사용하여 데이터 로드를 참조하세요.

사용자 인터페이스 업데이트

대시보드:

  • 이제 계정 사용자가 게시된 대시보드에서 시각화 데이터를 다운로드할 수 있습니다.
  • 게시되지 않은 대시보드는 이제 대시보드 위쪽의 초안/게시 드롭다운을 사용하여 게시할 수 있습니다.
  • where parameters으로 명명된 limit이(가) 감지되지 않는 문제를 해결했습니다.

시각화:

  • 어두운 모드에서 상자 그림 렌더링이 향상되었습니다.

질의 인사이트:

  • SQL 웨어하우스에 연결된 모든 노트북의 경우, 쿼리가 포함된 셀 아래의 성능 확인을 클릭하여 쿼리 프로필에 접근할 수 있습니다. 셀에 여러 쿼리가 포함된 경우 각 문에 대해 각각에 대한 쿼리 프로필에 대한 링크가 제공됩니다.

2024년 5월 30일

SQL 웨어하우스에 대한 새 권한 수준

권한을 모니터링할 수 있으므로 사용자는 연결된 쿼리 기록 및 쿼리 프로필을 포함하여 SQL 웨어하우스를 모니터링할 수 있습니다. 모니터링 권한은 이제 공개 미리 보기에 있습니다. 벡터 검색 엔드포인트 ACL을 참조하기 바랍니다.

사용자 인터페이스 업데이트

대시보드 개선:

  • 이미지 및 데이터를 다운로드하기 위한 대시보드 위젯에 케밥 메뉴가 추가되었습니다.
  • 사용자는 레거시 대시보드 쿼리 기반 parameters 및 드롭다운 listparameters를 대시보드로 마이그레이션할 수 있습니다.

2024년 5월 23일

사용자 인터페이스 업데이트

  • 이제 작업 영역에서 여러 항목을 select 이동하거나 삭제할 수 있습니다. 여러 개체를 선택하면 작업 표시줄이 나타나고 항목을 이동하거나 삭제하는 옵션이 제공됩니다. 또한 마우스를 사용하여 여러 항목을 select 새 위치로 끌 수 있습니다. 개체에 대한 기존 권한은 대량 이동 및 삭제 작업 중에 계속 적용됩니다.
  • 이제 Unity Catalog 자산을 Catalog 탐색기 및 Schema 브라우저에서 즐겨찾기로 표시할 수 있습니다. 여기에는 catalogs, 스키마, tables, 모델, volumes및 함수가 포함됩니다. 즐겨찾기로 표시하는 Unity Catalog 자산은 Azure Databricks 홈페이지에서 쉽게 액세스할 수 있습니다.

대시보드 업데이트:

  • 이중 축 콤보 차트는 이제 오른쪽 축에 막대 그래프 범례를 올바르게 표시하고 선형 그래프 범례를 적절히 표시합니다.
  • 이제 이중 축 차트가 막대에 레이블을 올바르게 표시합니다.

시각화 업데이트:

  • table 편집기의 에 대한 조건부 서식 레이블은 이제라면가 적용되어 어두운 모드를 지원합니다.
  • 중복된 링크 열기 아이콘이 table 편집기의 서식 도구 설명에서 제거되었습니다.
  • 이제 table 편집기에서 기본 글꼴 색 레이블이 자동으로 정렬됩니다.

2024년 5월 16일

출시 일정

  • 2024.25 미리 보기 출시: 5월 1일 완료
  • 2024.25의 현재 출시: 5월 14일부터 5월 21일까지

메모

pandas Python 라이브러리(버전 2.0.3)로의 업그레이드가 Databricks SQL 버전 2024.20에서 중대한 변경 사항을 초래했습니다. Azure Databricks는 버전 2024.20을 현재 채널에 롤아웃하지 않았습니다. 대신 미리 보기 채널은 2025년 5월 1일에 2024.25로 업그레이드되었습니다. 현재 채널 롤아웃은 2024.15에서 2024.25로 직접 진행합니다.

2024.25의 변경 내용

데이터 거버넌스

자격 증명 전달 및 Hive 메타스토어 table 액세스 제어는 더 이상 지원되지 않습니다.

인증 통과하이브 메타스토어 table 접근 제어는 레거시 데이터 거버넌스 모델입니다. 계정의 여러 작업 영역에서 데이터 액세스를 관리하고 감사하는 중앙 위치를 제공하여 데이터의 보안 및 거버넌스를 간소화하기 위해 Unity Catalog 업그레이드합니다. Unity Catalog란 무엇인가?.

자격 증명 전달 및 Hive 메타스토어 table 액세스 제어에 대한 지원은 향후 DBR 버전에서 제거될 예정입니다.

SQL 언어 기능

이제 WHERE 절에서 *(별) 항목이 지원됩니다.

이제 WHERE 절의 star(*) 절을 사용하여 SELECTlist모든 columns 참조할 수 있습니다. 예를 들어 SELECT * FROM VALUES(1, 2) AS T(a1, a2) WHERE 1 IN(T.*).

2024.15 이후 지역 간 송신 요금을 방지하기 위한 Cloudflare R2 스토리지 지원

이제 Unity Catalog등록된 데이터에 대한 클라우드 스토리지로 Cloudflare R2를 사용할 수 있습니다. Cloudflare R2는 주로 델타 공유 사용 사례를 위해 설계되었으며, 이는 데이터가 지역을 넘을 때 클라우드 providers에서 발생하는 데이터 송신 요금을 방지하기 위한 것입니다.

Cloudflare R2 스토리지는 Azure Data Lake Storage Gen2에서 지원되는 모든 Databricks 데이터 및 AI 자산을 지원합니다.

Cloudflare R2 복제본을 사용하거나 스토리지를 R2로 마이그레이션 하세요. 그리고 Cloudflare R2에 연결하기 위한 스토리지 자격 증명을 만드세요.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

데이터 검색 업데이트: Hive metastore에서 Unity Catalogupdate 마법사는 다목적 컴퓨팅 또는 SQL 웨어하우스를 사용하여 Hive 메타스토어 관리 tables 업그레이드를 지원합니다. 20개 이상의 tables를 업데이트하면 변환을 수행하는 SYNCALTER TABLE 명령이 포함된 새로운 notebook이 만들어집니다.

대쉬보드 업데이트:

  • 이제 영역, 가로 막대형, 선 및 분산형 차트 종류에 이중 축 기능을 사용할 수 있습니다.
    • 이중 축 차트를 사용하면 축 제목과 범위가 더 이상 보조 축에 복사되지 않습니다.
    • 시각화 구성에서 식별된 마지막 필드는 자동으로 오른쪽 y축으로 재배치됩니다.

2024년 5월 9일

SQL 편집기에서수정합니다.

  • 관리자 설정 결과 table 클립보드 기능가 이제 SQL 편집기의 새 결과 table에 적용됩니다.

대시보드 개선:

  • 쿼리 기반 parameters는 작성자가 뷰어가 대시보드 캔버스의 다른 시각화에 대한 parameters로 사용할 수 있는 선택 가능한 valueslist을 정의할 수 있도록 합니다. 참조하세요 쿼리 기반 parameters사용.
  • 이제 table 위젯에서 다운로드한 파일의 Column 순서가 유지됩니다.
  • 이제 table 편집기에서 columns이름을 표시하는 가리키기 도구 설명을 포함합니다.
  • 다른 시각화 형식에서 히스토그램으로 전환할 때 정보 인코딩이 더 잘 보존됩니다.

대시보드는수정합니다.

  • 단일 그리드 높이 필터에 불필요한 오버플로 스크롤 막대가 표시되는 where 문제가 해결되었습니다.
  • 참조된 데이터 세트 column 삭제된 where 게시된 대시보드에서 잘못 렌더링된 시각화를 발생시키는 문제를 해결했습니다.

2024년 5월 2일

대시보드 업데이트:

  • 이제 SQL 편집기에서 쿼리 및 시각화를 새 대시보드로 복사할 수 있습니다. SQL 편집기에서 레거시 대시보드에 시각화를 추가할 수 있습니다. 편집하거나 다운로드해서 대시보드에 추가하세요.
  • 이제 대시보드는 초기 로드 시간을 optimize 위해 24시간 결과 캐시를 유지 관리합니다. 데이터 세트 최적화 및 캐싱참조하세요.
  • 범주 X 및 양적 Y가 있는 가로 막대형 차트는 이제 Databricks Assistant 응답에서 정렬됩니다.
  • 레거시 히스토그램 COUNT (*)의 오류를 수정하여 정확한 마이그레이션을 보장했습니다.
  • 필터 위젯에서 숫자 형식과 날짜 형식을 혼합하는 기능을 구현했습니다.
  • 차트를 만들 때, Databricks Assistant가 입력하는 동안 관련 columns을 자동으로 제안합니다.

시각화 업데이트:

  • 이제 사용자가 선택한 tables 색이 레거시 차트의 밝은 모드와 어두운 모드에서 유지됩니다.
  • 콤보, 원형, 히트맵 및 히스토그램 차트의 성능을 향상시키기 위해 데이터 잘림 논리가 개선되었습니다.
  • 이제 기본 차트의 양적 축 맨 위에 눈금 표시가 항상 표시됩니다.

2024년 4월 23일

UI 업데이트:

  • UI의 모든 공유 대화 상자에서 All Users 그룹의 이름이 All Workspace Users로 변경되었습니다. 새 이름은 항상 작업 영역에 할당된 사용자를 포함하는 그룹의 범위를 보다 정확하게 반영합니다. 이 이름 바꾸기의 일부로 그룹 멤버 자격은 변경되지 않습니다.

대시보드 개선:

  • 대시보드의 SQL 웨어하우스가 시작되면 대기 시간을 explain 대화 상자가 나타납니다.
  • 스크롤 위치는 Canvas데이터 탭 간에 전환할 때 유지됩니다.
  • 이제 레거시 대시보드를 복제하여 Lakeview 대시보드를 만들면 일부 매개 변수 변환이 지원됩니다. 레거시 parameters조정을 참조하세요.
  • 오늘, 내일, 그리고 7일 전와 같은 상대 날짜는 이제 날짜 및 시간에 parameters지원됩니다.
  • 숫자 범위 슬라이더는 대시보드에서 필터로 추가할 수 있습니다.
  • 히스토그램은 이제 집계된 데이터를 표시할 수 있습니다.
  • 이제 산점도는 크기 인코딩을 지원합니다.

대시보드 수정 사항:

  • 이제 임시 색 인코딩이 색 할당을 올바르게 변경할 수 있습니다.

시각화 업데이트:

  • 이제 사용자 지정 도구 모음 형식이 다중 축 차트에 올바르게 작동합니다.
  • 사용자가 지난 14일 동안 토글을 변경하지 않은 경우 새 차트 미리 보기 태그가 제거됩니다.

2024년 4월 18일

Lakeview 대시보드는 일반적으로 사용할 수 있습니다.

이제 Lakeview 대시보드는 기본 대시보드 도구입니다. UI에서 대시보드로 이름이 변경되었습니다. Databricks SQL 대시보드는 이제 레거시 대시보드라고 합니다. 관련 API 도구의 이름은 변경되지 않았습니다.

  • 대시보드 개선 사항:
    • 감사 로그는 Lakeview 대시보드에 사용할 수 있습니다. 대시보드 이벤트를 참조하십시오.
    • 대시보드에서 다운로드한 데이터는 적용된 parameters를 준수합니다.
    • 데이터 세트를 먼저 추가하지 않고 데이터 탭에서 Databricks Assistant를 사용할 수 있습니다.
    • 여러 개의 Y 필드를 가진 누적 막대형 차트는 Y축 values의 합계에 따라 X축 정렬을 지원할 수 있습니다.
    • 시각화 축 메뉴에서 선형Log(대칭) 배율 함수 간에 전환합니다.
    • 이제 필터 위젯의 기본 크기가 더 간결해졌습니다.
    • 텍스트 항목 필터 위젯의 초기 로드 시간이 단축되었습니다.
    • 레거시 대시보드에서 마이그레이션할 때 자동 차트 변환이 향상되었습니다.
  • 대시보드는수정합니다.
    • 대시보드가 다른 사용자와 공유되었는지는 제한된 보기 설정 경고가 표시되지 않습니다.
    • 이제 데이터 탭 SQL 편집기에서 오류 메시지가 어둡게 모드로 설정됩니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

개선 사항:

  • 이제 누적 차트의 툴팁에 기본적으로 스택 값과 퍼센트가 표시됩니다.
  • 이제 다중 축 차트에 대한 도구 설명이 마우스오버된 항목을 강조합니다.
  • 이제 Databricks SQL에 대한 Table 시각화는 SQL 편집기에서 편집할 때 새 쿼리 결과의 데이터 형식을 조정합니다.
  • Catalog 탐색기의 쿼리 기록table은 쿼리 출처의 속성을 트리 형태로 보여줍니다. 이를 사용하여 실행할 쿼리 문을 트리거한 엔터티를 확인할 수 있습니다.

2024년 4월 11일

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

개선 사항:

  • 이제 Databricks SQL 및 Notebook에서 시각화를 만들 때 백분율별로 그룹화할 수 있습니다.
  • 새 차트(공개 미리 보기)의 경우 축과 평행한 직선으로 클릭하고 끌어서 단일 축을 따라 확대할 수 있습니다.
  • 이제 Unity Catalog 공유 클러스터 허용 목록 UI를 일반 공급할 수 있습니다. Catalog 탐색기의 Metastore 세부 정보 페이지에서 액세스할 수 있습니다. 허용 목록항목을 추가하는 방법 참조하세요.
  • 외부 위치를 만들고 편집하는 양식이 이제 전체 페이지로 열립니다. 여기에는 스토리지 자격 증명을 포함하는 옵션이 포함됩니다.

수정:

  • 음수 values 잘못 긍정으로 표시되었을 where 히스토그램 차트에 대한 문제를 수정했습니다.

2024년 4월 4일

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

개선 사항:

  • Lakeview 대시보드의 히스토그램 차트가 개선되었습니다.

    • 레이블에 대한 지원이 추가되었습니다.
    • 이제 다른 필드 간에 전환할 때 Bin 설정이 유지됩니다.
  • 이제 대시보드 목록 페이지의 샘플 갤러리에서 Lakeview 대시보드를 만듭니다. 자습서: 샘플 대시보드사용하세요.

  • Lakeview 대시보드에서 위젯의 테두리를 마우스 오른쪽 단추로 클릭하면 상황에 맞는 메뉴가 열립니다.

  • 게시된 Lakeview 대시보드를 보는 작업 영역 사용자를 위해 왼쪽 탐색 모음이 유지됩니다.

  • 필터 선택은 게시된 Lakeview 대시보드와 초안 사이를 탐색할 때 유지됩니다.

  • 이제 초안 Lakeview 대시보드의 데이터 탭에서 쿼리를 편집할 때 Column 이름을 SQL 편집기에 삽입할 수 있습니다.

  • Lakeview 대시보드를 바꾸면 기존 대시보드 이름이 유지되고 내용이 바뀝니다.

  • 열 지도와 다른 차트 유형 간에 시각화를 전환하면 관련 필드가 더 잘 유지됩니다.

수정:

  • 색 인코딩이 있는 가로 막대형 차트는 이제 여러 Y축 필드 추가를 올바르게 제한합니다.
  • 일부 시각화에서 PNG 단추가 누락된 다운로드 문제가 해결되었습니다.
  • 이전에 수천 개의 구분 기호가 누락된 음의 큰 정수에 대한 서식이 수정되었습니다.
  • 꺾은선형 차트에서 레이블 위로 마우스를 올렸을 때 잘못된 호버 라인 배치가 수정되었습니다.

2024년 3월 28일

Databricks SQL 버전 2024.15 사용 가능

출시 일정

  • 2024.15 미리 보기 출시: 2월 14일부터 3월 4일까지
  • 2024.15의 현재 출시: 3월 25일부터 4월 8일까지

2024.15의 변경 내용

델타 업데이트

  • Delta UniForm은 이제 일반 공급됩니다. UniForm은 이제 일반 공급되며 IcebergCompatV2 table 기능을 사용합니다. 이제 기존 tables에서 UniForm을 활성화하거나 업그레이드할 수 있습니다. 을 참조하여 Iceberg 클라이언트로 델타 tables을 읽어 보세요.
  • Delta tables의 데이터 건너뛰기 통계 다시 계산: 이제 columns이 데이터 건너뛰기에 사용되는 방식이 변경된 후, Delta 로그에 저장된 통계를 다시 계산할 수 있습니다. 델타 통계 지정을 columns참조하세요.

SQL 언어 업데이트

  • SQL 세션에서 임시 변수 선언: 이 릴리스에서는 set 수 있는 세션에서 임시 변수를 선언한 다음 쿼리에서 참조할 수 있는 기능을 소개합니다. 변수참조하세요.
  • 네이티브 XML 파일 형식 지원(공개 미리 보기): Native XML 파일 형식 지원은 이제 공개 미리 보기로 제공됩니다. XML 파일 형식 지원을 사용하면 일괄 처리 또는 스트리밍을 위해 XML 데이터를 수집, 쿼리 및 구문 분석할 수 있습니다. schema 및 데이터 형식을 자동으로 유추 및 발전시키고, from_xml같은 SQL 식을 지원하며, XML 문서를 generate 수 있습니다. 외부 jar가 필요 없으며 자동 로더, read_files, COPY INTO및 Delta Live Tables와 원활하게 작동합니다. XML 파일 읽기 및 쓰기참조하세요.

Apache Spark SQL 업데이트

Databricks SQL 2024.15에는 Apache Spark 3.5.0이 포함됩니다. SQL에 대한 추가 버그 수정 및 개선 사항은 Databricks Runtime 14.3 릴리스 노트에 나열되어 있습니다. Apache Spark 참조하고 전체 list을 위한 [SQL] 태그를 찾습니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL 웨어하우스 컴퓨팅 버전과 독립적입니다.

  • Catalog 탐색기의 엔터티 페이지에 있는 새 개요 탭에는 파일 크기, 데이터 원본, 소유자, tableschema및 코멘트와 같은 중요한 메타데이터가 표시됩니다.

  • Lakeview 대시보드 업데이트:

    • 이제 Lakeview 대시보드는 parameters지원합니다. 작성자는 데이터 탭에서 데이터 세트 쿼리에 parameters을 추가하고, 단일 값 선택기와 날짜 선택기를 사용하여 캔버스에서 setparameters할 수 있습니다. 을(를) 참조하여 대시보드 parameters작업을 수행하세요.
    • 이제 Lakeview 대시보드는 작업 영역 권한 API에서 지원됩니다. REST API 참조에서 PATCH /api/workspace/workspace/updatepermissions을 확인하세요.
    • 캔버스의 Control 위젯 이름이 필터 위젯으로 바뀌었습니다.
    • 콤보 차트는 더 이상 x축에서 집계된 필드를 허용하지 않습니다.
    • 이제 공유 대화 상자의 복사 링크 버튼에는 URL에 저장된 parameters가 포함됩니다.
    • 게시된 대시보드의 위젯은 마우스로 가리키면 더 이상 테두리를 표시하지 않습니다.
    • Databricks 길잡이 및 PNG 다운로드 버튼이 차트 시각적 요소와 겹치는 문제(where)가 해결되었습니다.
  • 열 지도와 다른 차트 유형 간에 시각화를 전환하면 관련 필드가 더 잘 유지됩니다.

  • 색 인코딩이 있는 가로 막대형 차트는 이제 여러 Y축 필드 추가를 올바르게 제한합니다.

2024년 3월 21일

  • Unity Catalog 모델 계보는 이제 공개 미리 보기로 제공됩니다.

이제 Catalog 탐색기의 table 보기에는 주요 메타데이터를 설명하는 개요 탭이 있습니다.

  • 이제 일반 공급되는 Notebook용 SQL 웨어하우스를 사용하면 Notebook의 풍부하고 공동 작업적인 제작 환경에서 SQL 워크로드에 대해 완전히 관리되고 즉각적이며 확장 가능한 컴퓨팅을 활용할 수 있습니다. SQL 웨어하우스을(를) 사용하는 노트북을 참조하세요.

다음 수정 사항 및 개선 사항이 Lakeview 대시보드에 적용됩니다.

  • Lakeview에 대한 확장된 API 지원은 대시보드를 만들고, get, update, 그리고 대시보드를 휴지통으로 보내는 기능을 추가합니다. REST API 참조에서 Lakeview 참조하세요.
  • 데이터 탭에 Catalog 브라우저에 대한 refresh 단추가 추가되었습니다.
  • 이제 Lakeview 대시보드 작업 영역 사이드바의 메뉴에 대시보드 앞에 표시됩니다. 대시보드 목록 페이지에서 Lakeview 대시보드 탭이 대시보드 탭의 왼쪽에 나타납니다.
  • Lakeview용 Databricks Assistant 환경은 검색 가능성을 개선하고 사용자가 제공할 수 있는 프롬프트를 이해하는 데 도움이 되도록 입력 상자 및 제안 사항으로 업데이트되었습니다.
  • 이제 Lakeview 시각화는 중앙값 집계를 지원합니다.
  • tables만들 때 보다 간소화된 사용자 환경을 위해 Lakeview 대시보드 시각화 편집기에서 색 선택기를 업데이트했습니다.
  • 각도 또는 색 정의가 있는 시나리오를 독점적으로 지원하도록 원형 차트 마이그레이션이 개선되었습니다.
  • 'count' 로 명명된 차트에서 그룹화를 방해하는 버그가 수정되었습니다. 이제 차트를 개수필드별로 그룹화할 수 있습니다.
  • 가로 막대형 차트의 경우 사용자가 선택한 구성에 적용할 수 없는 경우 그룹스택 레이아웃 컨트롤이 숨겨집니다.

2024년 3월 14일

Lakeview 대시보드의 경우:

  • 히스토그램은 이제 사용자 지정 범주 색을 지원합니다.

    • 히트맵은 이제 정량적 배율을 지원합니다.
    • 제목 및 설명은 콤보 차트를 포함하여 시각화 형식 간에 전환할 때 유지됩니다.
    • 이제 초안 대시보드 위젯과 연결된 기본 데이터 세트를 마우스 오른쪽 단추로 클릭하여 열 수 있습니다. 데이터 세트가 데이터 탭에서 열립니다.
  • 이제 새 차트는 숫자 columns에 있는 null values에 별칭과 사용자 지정 색상을 적용합니다.

  • 이제 새 차트는 y축의 상단을 표시하기 위해 눈금 표시를 렌더링합니다.

2024년 3월 7일

  • Catalog 탐색기에서 table을(를) 조회할 때, 만들기 버튼에는 Databricks SQL 대시보드가 아닌 Lakeview 대시보드를 만드는 옵션이 포함됩니다.

  • 이제 Lakeview 대시보드에 히스토그램을 사용할 수 있습니다. 히스토그램은 일반적으로 숫자 필드의 분포를 시각화하는 데 사용됩니다.

  • Databricks SQL 대시보드를 복제하여 Lakeview 대시보드를 만들 때 데이터 세트 변환 문제는 이제 Lakeview 대시보드의 새 위젯에 오류로 표시됩니다.

  • 색 그라데이션은 Lakeview 대시보드의 시각화에 숫자 필드를 사용할 때 사용할 수 있습니다.

  • 이제 필드에서 색을 지정하면 Lakeview 대시보드 시각화 편집기에서 색 그라데이션이 활성화됩니다.

  • 뷰어에 초안 Lakeview 대시보드에 대한 편집 권한이 없는 경우 시각화와 연결된 제목 및 설명은 더 이상 편집할 수 없습니다.

  • 100개가 넘는 계열이 있는 차트의 도구 설명에 where 모든 계열이 잘못 표시되는 문제를 해결했습니다. 이제 포커스가 있는 시리즈만 표시됩니다.

  • 성능 최적화를 통해 SQL 편집기에서 입력 대기 시간을 30% 줄입니다.

  • SQL 편집기에서 쿼리를 관리할 때 쿼리를 휴지통으로 이동하면 탭이 자동으로 닫힙니다.

  • SQL 편집기에서 측면 패널의 너비를 조정할 때 실수로 텍스트가 선택되는 문제가 where에서 수정되었습니다.

2024년 2월 29일

  • 이제 Catalog Explorer의 schema 브라우저에 column 기본 및 외래 키 제약 조건이 표시됩니다.

  • Catalog 탐색기의 계보 탭에 표시된 보존 시간이 1년으로 늘어났습니다.

  • 이제 노트북의 새 차트에 대한 툴팁이 항상 시각적 경계 내에 렌더링됩니다.

  • REST API를 사용하여 Lakeview 대시보드를 프로그래밍 방식으로 관리하는 방법을 알아봅니다. 작업 영역 API사용하여 대시보드 관리 참조하세요.

  • 이제 Lakeview 대시보드는 히스토그램을 지원합니다.

  • Lakeview 대시보드의 공유 및 게시가 향상되었습니다.

    • 공유 및 게시 대화 상자가 개선되어 모든 계정 사용자에게 안전하고 쉽게 공유할 수 있습니다.
    • 작업 영역 브라우저에서 열린 대시보드는 게시된 대시보드(있는 경우)를 표시합니다. 이제 뷰어는 게시자, 시간 및 credentials포함하여 최신 게시된 버전의 세부 정보를 볼 수 있습니다.
    • 편집기에서 Lakeview 대시보드 UI의 새 드롭다운 전환기를 사용하면 초안 버전과 게시된 버전 간에 빠르게 이동할 수 있습니다.

2024년 2월 22일

  • 탐색기 보기의 샘플 데이터 탭이 개선되어 정렬하고 선택한 데이터를 클립보드에 복사하고 줄 번호를 볼 있습니다. 이제 JSON 개체, 날짜, null values및 숫자 같은 특수 values을 더 잘 표시할 수 있습니다.

  • 이제 Lakeview 대시보드는 대시보드의 정기적인 PDF 스냅샷을 작업 영역 사용자 및 알림 대상으로 보낼 수 있도록 지원합니다. 일정 및 구독확인하세요.

  • Lakeview 드롭다운 선택기에서 시각화 옵션인 list이 이제 알파벳 순으로 정렬됩니다.

  • Databricks SQL 대시보드를 Lakeview 대시보드에 복사할 때 변환할 수 없는 위젯은 이제 오류 메시지 대신 시각화 구성 선택기를 표시합니다.

2024년 2월 15일

  • SELECT action AS 'action::filter'같은 코드 기반 쿼리 필터에 대한 설명서가 제거되었습니다. Databricks는 쿼리를 remove 패턴에 맞게 업데이트할 것을 권장합니다.

  • Lakeview 대시보드의 경우 각도 필드가 지정되지 않은 경우 원형 차트에 동일한 크기의 조각이 표시됩니다.

  • 이제 Lakeview는 막대형 차트와 꺾은선형 차트를 결합하여 동일한 차트에 서로 다른 두 가지 values을 표시하는 콤보 차트를 지원합니다.

  • 색 강도를 사용하여 두 불연속 변수 간의 상관 관계를 표시하는 열 지도 차트는 이제 Lakeview에서 사용할 수 있습니다.

2024년 2월 8일

  • 이제 권한이 없는 Lakeview 대시보드에 대한 링크를 열 때 액세스를 요청할 수 있습니다.
  • 이제 Lakeview 대시보드 필터에는 명시적 모든없음 옵션이 있습니다. 작성자는 단일 select 필터에서 모든 옵션을 숨기도록 선택할 수 있습니다.
  • 이제 Lakeview 대시보드 차트에서 축의 최소값 set 및 최대값 values을 설정할 수 있습니다.

2024년 2월 1일

Databricks SQL 버전 2024.10 사용 가능

출시 일정

  • 2024.10 미리 보기 출시: 2024년 1월 30일부터 2024년 2월 5일 사이
  • 2024.10에 대한 현재 출시: 2023년 2월 13일부터 2024년 2월 20일 사이

2024.10 변경 내용

  • DML 명령에서 손상된 파일 처리를 수정했습니다. DML 명령 DELETE, UPDATEMERGE INTO 더 이상 읽기 옵션 ignoreCorruptFilesignoreMissingFiles적용되지 않습니다. table에서 읽을 수 없는 파일을 발견하면 이러한 옵션이 지정된 경우에도 명령이 실패합니다.
  • 행 수준 동시성은 일반적으로 사용 가능하며 기본적으로 설정됩니다. 행 수준 동시성은 행 수준에서 변경 내용을 검색하여 동시 쓰기 작업 간의 충돌을 줄입니다. 행 수준 동시성은 분할 없이 tables에서만 지원되며, 여기에는 액체 클러스터링이 있는 tables도 포함되어 있습니다. 행 수준 동시성은 삭제 벡터가 활성화된 Delta tables에서 기본적으로 활성화되어 있습니다. 쓰기 충돌 및 행 수준 동시성을 참조하세요.
  • Unity Catalog 외부 tables(공개 미리 보기): 이제 Unity Catalog 외부 tables에서 얕은 클론을 사용할 수 있습니다. Unity 대한 단순 클론을 참조하세요.
  • 빠른 다중 스레드 통계 수집: 통계 수집은 CONVERT TO DELTA 실행하거나 Iceberg 및 Parquet tables복제할 때 작은 클러스터에서 최대 10배 더 빠릅니다. Delta Lake로 변환하기Parquet와 Iceberg를 Delta Lake에 증분 복제하기 tables를 참조하세요.
  • 델타 파일의 DeltaSource에서 푸시다운 필터를 : 더 나은 사용률을 위해 델타 tables 스트리밍 쿼리에 대한 partition 필터는 이제 속도 제한 전에 델타로 푸시다운됩니다.

사용자 인터페이스 업데이트

이 섹션에 나열된 기능은 위에서 설명한 SQL Warehouse 컴퓨팅 버전과 독립적입니다.

  • Databricks SQL 개체(쿼리, 대시보드 및 경고)에 대한 목록 페이지의 관리자 보기 탭이 제거되었습니다. 작업 영역 관리자 사용자는 해당 목록 페이지의 모든 개체를 볼 수 있습니다. 저장된 쿼리 에 액세스 및 관리, 레거시 대시보드 , 그리고 Databricks SQL 경고란 무엇인지 보기.

  • 쿼리 기록 페이지에는 기본적으로 지난 24시간 동안의 쿼리가 표시됩니다. 쿼리 기록참조하세요.

  • Lakeview 대시보드에 복제하는 메뉴 옵션이 Databricks SQL 대시보드 UI에 추가되었습니다. 이 도구를 사용하여 기존 Databricks SQL 대시보드에서 동일한 쿼리 및 시각화를 포함하는 새 Lakeview 대시보드를 만들 수 있습니다. 레거시 대시보드를 AI/BI 대시보드로 복제하는 방법을 참조하세요.

  • Lakeview 대시보드의 가로 막대형 차트는 누적 막대를 지원하여 100개의%정규화합니다.

  • 게시된 Lakeview 대시보드에서 확대하는 where 잘못된 확대/축소 간격에 초점을 맞추는 문제를 해결했습니다.

2024년 1월 24일

  • Lakeview 대시보드 캔버스는 가능하면 행 간에 빈 세로 공백을 remove 위젯 배치를 자동으로 조정합니다.
  • Lakeview 대시보드 시각화에서 제목과 설명 텍스트 사이의 공백을 줄입니다.

2024년 1월 18일

  • x축의 단일 날짜를 보여주는 where 시각화의 가로 막대형 차트에서 렌더링 문제가 발생하여 막대가 매우 얇아지는 현상을 수정했습니다. 새 차트 시각화는 예상대로 렌더링됩니다.

  • Lakeview 대시보드 목록 페이지에는 기본적으로 사용자의 대시보드가 표시됩니다. 해당 페이지의 필터를 사용하여 다른 작업 영역 사용자가 소유한 Lakeview 대시보드에 액세스할 수 있습니다.

2024년 1월 11일

  • Databricks SQL 쿼리 및 대시보드 API는 실행 역할 설정을 프로그래밍 방식으로 변경할 수 있습니다.

  • Lakeview는 작업 영역에서 초안 대시보드를 쉽게 재현할 수 있도록 대시보드를 파일로 내보내고 가져올 수 있도록 지원합니다. 대시보드 내보내기, 가져오기 또는 바꾸기 참조

2024년 1월 4일

  • Catalog 탐색기에서 기본 키 및 외래 키 엔터티 관계 다이어그램을 도입했습니다. 엔터티 관계 다이어그램보기를 참조하세요.