다음을 통해 공유

2021년 11월

  • 아티클

이러한 기능 및 Azure Databricks 플랫폼 개선 사항은 2021년 11월에 릴리스되었습니다.

참고 항목

릴리스가 준비되었습니다. Azure Databricks 계정은 초기 릴리스 날짜 후 일주일 이상까지 업데이트되지 않을 수 있습니다.

기능 tables 대한 태그 만들기(공개 미리 보기)

2021년 11월 30일 - 12월 6일: 버전 3.60

이제 기능 tables 대한 태그를 만들고 검색에 사용할 수 있습니다.

Python 셀의 SQL 명령에 대한 구문 강조 표시 및 자동 완성

2021년 11월 30일 - 12월 6일: 버전 3.60

구문 강조 표시 및 SQL 자동 완성은 spark.sql 명령과 같은 Python 명령 내에서 SQL을 사용할 때 사용할 수 있습니다.

실험 페이지(퍼블릭 미리 보기)에서 MLflow 실험에 대한 이름 바꾸기, 삭제, 권한 변경

2021년 11월 30일 - 12월 6일: 버전 3.60

이제 실험 페이지에서 MLflow 실험의 이름을 변경하고, 삭제하고, 권한을 변경할 수 있습니다. 자세한 내용은 실험 관리를 참조하세요.

Notebooks의 새로운 데이터 프로필: 데이터의 테이블 및 그래픽 요약(퍼블릭 미리 보기)

2021년 11월 30일 - 12월 6일: 버전 3.60

Scala 또는 Python에서 display(<dataframe>) 사용하거나 SQL 쿼리를 실행하는 경우 결과 창에는 DataFrame 또는 Data Profile대한 대화형 테이블 형식 및 그래픽 요약을 표시하는 새 탭 table 표시됩니다. 자세한 내용은 새 데이터 프로필 만들기 및 새 시각화 만들기를 참조하세요.

Databricks 유틸리티 명령 dbutils.data.summarize를 사용할 수도 있습니다.

Delta Live Tables 파이프라인을 실행하는 동안 스키마가 진화할 때 로깅이 개선되었습니다.

2021년 11월 30일 - 12월 6일: 버전 3.60

Delta Live Tables 파이프라인이 자동 로더를 사용하여 데이터를 읽는 도중에 schema이 실행되는 동안 입력 데이터의 update이 변경되면, update은 CANCELED로 로깅되고 자동으로 다시 시도됩니다. 새로운 update가 상태 SCHEMA_CHANGE로 기록되었습니다. 이전에는 입력 schema 변경되면 Delta Live가 update자동으로 다시 시도하더라도 FAILEDTablesupdate 기록됩니다.

Databricks Partner Connect GA

2021년 11월 18일

이제 Databricks Partner Connect가 일반 공급됩니다. Partner Connect를 사용하여 자주 사용되는 데이터 및 AI 도구를 빠르고 쉽게 검색하고 Azure Databricks 레이크하우스에 연결할 수 있습니다. Databricks Partner Connect란?을 참조하세요.

호환성이 손상되는 변경: 클러스터 만들기를 위한 환경 변수 remove $에서 values 이스케이프 및 따옴표

2021년 11월 15~30일: 버전 3.59

참고 항목

이 변경사항은 2021년 12월 3일 01:00-03:00 UTC에 되돌려집니다.

클러스터를 만들 때 환경 변수를 지정할 수 있습니다. 이 변경 전에 환경 변수 값 내에서 $을 사용하려면 이를 이스케이프하거나 따옴표로 묶어야 했습니다. 이 변경으로 이스케이프 문자나 따옴표가 더 이상 필요하지 않습니다. 환경 변수 $에서 이스케이프되거나 따옴표가 있는 values 문자가 더 이상 $로 해석되지 않기 때문에, 이 변경으로 인해 호환성 문제가 발생합니다. 예를 들어 이제 다음 환경 변수 선언이 제공됩니다.

WITH_ESCAPING=\\$123
WITH_DOUBLE_QUOTING="$123"
NO_ESCAPING=$123
WITH_SINGLE_QUOTING='$123'
NO_QUOTING=$123

예를 들어, 수첩에서 이러한 values을 출력하는 경우:

%sh
echo ${WITH_ESCAPING}
echo ${WITH_DOUBLE_QUOTING}
echo ${NO_ESCAPING}
echo ${WITH_SINGLE_QUOTING}
echo ${NO_QUOTING}

values을(를) 다음과 같이 반환합니다.

\\$123
"$123"
$123
driver23
$123

참고 항목

이 변경 내용은 환경 변수에만 적용됩니다. 비밀에는 적용되지 않습니다.

Repos의 파일에 대한 사용 용이성 개선

2021년 11월 15~30일: 버전 3.59

파일 텍스트 편집기에 새로운 기능이 추가되었습니다.

  • 태그를 만들면 닫기 태그가 자동으로 만들어집니다.
  • 이제 코드 접기를 사용할 수 있습니다.

또한 텍스트 파일의 경우 이제 리포지토리 루트의 경로 외에 전체 리포지토리 경로를 복사할 수 있습니다. 자세한 내용은 프로그래밍 방식으로 작업 영역 파일과 상호 작용을 참조하세요.

레거시 SQL 위젯에 대한 지원이 2022년 1월 15일에 종료됨

2021년 11월 15일

Databricks는 2022년 1월 15일에 레거시 SQL 위젯에 대한 지원을 종료합니다. 해당 날짜 이후로 Notebook은 UI에서 레거시 SQL 위젯을 더 이상 렌더링하지 않지만, 과parameters이를 통해 %run로 전달될 경우 레거시 SQL 위젯 API에서는 계속 작동합니다. 위젯이 UI에서 계속 렌더링되도록 보장하려면, 코드를 조정하여 updateSQL 위젯을 사용해야 합니다.

Azure Databricks 작업에 대한 사용자 인터페이스 개선 사항

2021년 11월 15~30일: 버전 3.59

이 릴리스에는 작업 UI에 대한 다음과 같은 개선 사항이 포함되어 있습니다.

  • 이제 단일 작업을 복제하여 기존 작업에 새 작업을 더 쉽게 추가할 수 있습니다. 작업 이름 변경, 복제, 삭제를 참조하세요.
  • 작업 실행 세부 정보를 볼 때 작업 ID과 작업 실행 ID이 링크로 제공되어, 작업 세부 정보 views사이를 쉽게 전환할 수 있습니다. 작업 실행 세부 정보 보기를 참조하세요.
  • 이제 작업을 보거나 편집할 때 작업 경로(예: Notebook 경로)를 복사할 수 있습니다. 작업 경로 복사를 참조하세요.

Power BI용 Delta Sharing 커넥터

2021년 11월 15일

사용자가 Delta Sharing 공개 프로토콜을 통해 공유 데이터집합을 검색, 분석 및 시각화할 수 있는 Power BI Delta Sharing 커넥터를 릴리스했습니다. 이 프로토콜을 사용하면 REST 및 클라우드 스토리지를 활용하여 제품 및 플랫폼에서 데이터 세트를 안전하게 교환할 수 있습니다. 자세한 내용은 Power BI Delta Sharing 커넥터를 참조하세요.

Databricks ODBC 드라이버 2.6.19

2021년 11월 12일

Databricks ODBC 드라이버 버전 2.6.19를 릴리스했습니다(다운로드). 새 드라이버는 Databricks에서 반환된 SQL 오류 조건(SQLState)을 클라이언트에 전파합니다.

Databricks Runtime 10.1 및 10.1 ML은 GA입니다. 10.1 Photon은 공개 미리 보기 상태입니다.

2021년 11월 10일

이제 Databricks Runtime 10.1 및 10.1 ML이 일반 공급됩니다. 10.1 Photon은 공개 미리 보기 상태입니다.

Databricks Runtime 10.1(EoS) 및 ML용 Databricks Runtime 10.1(EoS)을 참조하세요.

Databricks Runtime 10.1(베타)

2021년 11월 4일

이제 Databricks Runtime 10.1, 10.1 Photon 및 10.1 ML을 베타 릴리스로 사용할 수 있습니다.

Databricks Runtime 10.1(EoS) 및 ML용 Databricks Runtime 10.1(EoS)에서 전체 릴리스 정보를 참조하세요.

MLflow 실험 이름 바꾸기 및 삭제(퍼블릭 미리 보기)

2021년 11월 2~8일: 버전 3.58

이제 실험 페이지에서 MLflow 실험에 대한 권한을 변경하고, 삭제하고, 권한을 변경할 수 있습니다.

이제 기존 정책을 복제하여 클러스터 정책을 만들 수 있음

2021년 11월 2~8일: 버전 3.58

기존 정책을 복제하여 새 클러스터 정책을 만들기 위한 지원이 추가되었습니다. 컴퓨팅 정책 생성 및 관리를 참조하세요.

Notebook 및 Notebook 셀의 기본 언어를 더 쉽게 변경

2021년 11월 2~8일: 버전 3.58

Notebook 상단과 각 셀에 새 언어 단추가 나타납니다. 이 버튼을 사용하여 Notebook의 기본 언어를 select하고, 특정 셀의 언어를 select할 수 있습니다. 자세한 내용은 Set 기본 언어 및 혼합 언어를 참조하세요.

웹 터미널에서 Repos 파일 사용

2021년 11월 2~8일: 버전 3.58

이제 경로를 사용하여 웹 터미널에서 /Workspace에 액세스할 수 있습니다.