2023년 5월
해당 기능과 Azure Databricks 플랫폼 개선 사항은 2023년 5월에 릴리스되었습니다.
참고 항목
릴리스가 준비되었습니다. Azure Databricks 계정은 초기 릴리스 날짜 후 일주일 이후까지 업데이트되지 않을 수 있습니다.
테이블 UI 만들기 또는 수정은 Avro, Parquet 및 텍스트 파일 업로드를 지원합니다.
2023년 5월 29일
테이블 만들기 또는 수정 UI는 이제 다음 파일 형식을 지원합니다.
- Avro(.avro)
- Parquet(.parquet)
- 텍스트(.txt)
자세한 내용은 파일 업로드를 사용하여 테이블을 만들거나 수정하는 방법에 대한 항목을 참조하세요.
Unity 카탈로그의 외부 위치를 사용하여 데이터 추가 UI로 데이터를 로드하세요 (공개 미리 보기).
2023년 5월 29일
이제 데이터 추가 UI를 사용하여 Unity 카탈로그 외부 위치로 정의된 클라우드 개체 스토리지 경로에서 데이터를 로드할 수 있습니다. 자세한 내용은 Unity 카탈로그 외부 위치를 사용하여 데이터 로드에 대한 내용을 참조하십시오.
SQL Warehouse에서 Databricks Notebook 실행(공개 미리 보기)
2023년 5월 31일
이제 SQL Warehouse에서 Databricks Notebook을 실행할 수 있습니다. SQL Warehouse는 SQL 분석에 최적화되어 있으며 다목적 컴퓨팅에 비해 SQL 실행에 더 나은 가격 성능을 제공합니다. 자세한 내용은 SQL Warehouse가 있는 노트북 사용을 참조하세요.
Enter 키에서 자동 완성 제안을 수락하지 못하도록 방지
2023년 5월 26일
이제 Enter 키가 SQL 편집기에서 자동 완성 제안을 수락하지 못하도록 할 수 있습니다. Enter를 사용하지 않도록 설정하여 SQL 편집기에서 kebab 메뉴에서 자동 완성 허용합니다.
새 지역: 중국 동부 3
2023년 5월 25일
이제 Azure 데이터브릭을 Azure 지역 중국 동부 3에서 사용할 수 있습니다. Azure Databricks 지역을 참조하세요.
이제 Azure 기밀 컴퓨팅 VM 유형에 대한 지원 (공개 미리 보기)
2023년 5월 25일
이제 Azure Databricks는 클러스터를 만들 때 Azure 기밀 컴퓨팅 VM 유형을 사용할 수 있습니다. Azure 기밀 컴퓨팅은 클라우드 공급자가 중요한 데이터에 액세스할 수 없도록 사용 중인 데이터를 보호하는 데 도움이 됩니다. Azure 기밀 컴퓨팅 VM를 참조하세요.
Databricks Terraform 공급자 버전이 1.17.0으로 업데이트됨
2023년 5월 22일
Databricks Terraform 공급자 1.17.0은 32비트 이진 파일 릴리스에 대한 지원을 제거하고, databricks_cluster 리소스에서 클러스터 정책을 사용하는 경우의 영향에 대한 자세한 정보를 추가하는 등의 작업을 제공합니다. 자세한 내용은 버전 1.17.0에 대한 변경 로그를 참조하세요.
데이터 업로드 UI는 새 열 데이터 형식을 지원합니다.
2023년 5월 19일
이제 업로드 데이터 UI는 다음 열 데이터 형식을 지원합니다.
STRUCTARRAYDECIMAL(P,S)
자세한 내용은 파일 업로드를 사용하여 테이블을 만들거나 수정하는 방법에 대한 항목을 참조하세요.
Unity 카탈로그 카탈로그를 특정 작업 영역에 바인딩
2023년 5월 17일
이제 작업 영역 카탈로그 바인딩이라고도 하는 계정의 특정 작업 영역에 대한 카탈로그 액세스를 제한할 수 있습니다. 이 기능은 작업 영역을 사용하여 사용자 데이터 액세스를 격리하는 경우 특히 유용합니다. 예를 들어 별도의 프로덕션 및 개발 작업 영역 또는 중요한 데이터를 처리하기 위한 전용 작업 영역이 있는 경우입니다.
자세한 내용은특정 작업 영역에 대한 카탈로그 액세스 제한
모든 사용자가 Partner Connect를 사용하여 Fivetran에 연결할 수 있음(공개 미리 보기)
2023년 5월 17일
파트너 연결을 사용하여 Fivetran에 연결하는 데 작업 영역 관리자 사용자 역할이 더 이상 필요하지 않습니다. 자세한 내용은 파트너 연결을 사용하여 Fivetran에 연결하기를 참조하세요.
Databricks Terraform 공급자 버전이 1.16.1로 업데이트됨
2023년 5월 16일
Databricks Terraform 공급자 1.16.1은 databricks_service_principal_secret 리소스에 대한 설명서와 databricks_pipeline 리소스의 Unity 카탈로그 통합, databricks_secret_scope 리소스에 대한 업데이트 설명서 등을 추가합니다. 자세한 내용은 버전 1.16.1에 대한 변경 로그를 참조하세요.
Databricks JDBC 드라이버 2.6.33
2023년 5월 15일
Databricks JDBC 드라이버 버전 2.6.33를 릴리스했습니다(다운로드). 이 릴리스에서는 Unity 카탈로그가 활성화된 서버에 연결할 때 기본 키 및 외래 키 API를 추가합니다.
Partner Connect에서 Alation 지원
2023년 5월 15-22일
이제 파트너 연결을 사용하여 Azure 데이터브릭 작업 영역을 Alation에 연결할 수 있습니다. 자세한 내용은 Azure 데이터브릭을 Alation에 연결하기를 참조하세요.
편집기용 새 기본 테마
2023년 5월 12일
고객 피드백에 따라 편집기에서 기본 색 구성표가 업데이트되어 가독성이 향상되었습니다.
Databricks Terraform 공급자 버전이 1.16.0으로 업데이트됨
2023년 5월 12일
Databricks Terraform 공급자 1.16.0은 databricks_workspace_file 리소스를 추가하고, notification_settings 리소스에 databricks_job 블록을 추가하는 등의 기능을 제공합니다. 자세한 내용은 버전 1.16.0에 대한 변경 로그를 참조하세요.
Azure 관리 ID에 대한 Unity 카탈로그 지원은 이제 GA입니다.
2023년 5월 11일
이제 Unity 카탈로그 사용자를 대신하여 Azure 관리 ID를 사용하여 스토리지 컨테이너에 액세스하는 기능을 일반적으로 사용할 수 있습니다. Azure 관리 ID는 이 사용 사례에 대해 서비스 주체에 비해 상당한 이점을 제공합니다. Unity 카탈로그에서 Azure 관리 ID를 활용하여 스토리지에 액세스합니다.
Databricks Runtime 13.1(베타)
2023년 5월 10일
이제 Databricks Runtime 13.1 및 Databricks Runtime 13.1 ML을 베타 릴리스로 사용할 수 있습니다.
Databricks Runtime 13.1(EoS) 및 Machine Learning용 Databricks Runtime 13.1(EoS)을 참조하세요.
Azure Databricks 워크플로에서 파일 기반 SQL 쿼리 실행
2023년 5월 9일
이제 Azure Databricks 작업에 SQL 작업을 추가할 때 Git 공급자에서 SQL 쿼리를 검색할 수 있습니다. 작업에서 Git 사용을 참조하세요.
Databricks Terraform 공급자 버전이 1.15.0으로 업데이트됨
2023년 5월 5일
버전 1.15.0에는 실험적인 databricks_sql_table 리소스가 추가되고, 워크스페이스 파일에서 databricks_cluster 초기화 스크립트를 실행하는 기능이 지원되며, databricks_grants에 누락된 권한이 추가되는 등 여러 가지 기능이 추가되었습니다. 자세한 내용은 버전 1.15.0에 대한 변경 로그를 참조하세요.
Azure 중국 지역은 이제 Unity 카탈로그를 지원합니다.
2023년 5월 5일
중국 동부 2, 중국 북부 2 및 중국 북부 3 지역은 이제 Unity 카탈로그를 지원합니다.
계정 별명은 이제 계정 콘솔에서 사용할 수 있습니다.
2023년 5월 5일
이제 계정 관리자는 Azure Databricks 계정에 대한 계정 애칭을 설정할 수 있습니다. 계정에 애칭을 지정하면 계정 콘솔의 위쪽과 계정 ID 옆에 이름이 표시됩니다. 자세한 내용은 별칭으로 계정 추가를 참조하세요.
Delta Sharing을 사용하여 Notebook 공유
2023년 5월 4일
이제 델타 공유를 사용해 Databricks 간 공유 흐름을 사용해 Notebook 파일을 안전하게 공유할 수 있습니다.
전자 필기장을 공유하면 사용자가 메타스토어 및 계정 간에 공동 작업할 수 있으며 공급자가 공유하는 데이터에 대한 사용 사례 및 시각화를 시연할 수 있습니다.
공유 전자 필기장 파일 추가(공급자용) 및 공유 전자 필기장 읽기(받는 사람용)를 참조하세요.
Azure Databricks는 더 이상 서버리스 스타터 SQL Warehouse를 만들지 않습니다.
2023년 5월 3~12일
Azure Databricks는 더 이상 서버리스 스타터 SQL Warehouse를 만들지 않습니다. 직접 만들려면 SQL Warehouse 만들기를 참조하세요.
이제 SQL Warehouse API에서 서버리스 컴퓨팅을 사용하도록 설정하려면 명시적이어야 함
2023년 5월 3~12일
SQL Warehouse를 만들 때 SQL Warehouse API가 약간 변경되었습니다.
작업 영역에 서버리스 SQL 엔드포인트가 활성화된 경우 필드 enable_serverless_compute의 경우 이전에는 기본값이 true였습니다. 이제 대부분의 워크스페이스에서 기본값은 false입니다. 그러나 이 작업 영역이 2022년 11월 1일부터 2023년 5월 19일 사이에 SQL Warehouse API를 사용하여 웨어하우스를 생성하고 지역을 포함한 서버리스 SQL 웨어하우스 요구 사항에 부합하면, 기본값은 여전히 true로 설정된 상태로 유지됩니다.
특히 작업 영역이 많은 조직의 경우 모호성을 방지하기 위해 Databricks는 항상 enable_serverless_compute 필드를 명시적으로 설정하는 것이 좋습니다.
서버리스 SQL Warehouse의 작업 영역 설정 변경
2023년 5월 3~12일
서버리스 컴퓨팅을 사용하도록 설정된 계정의 경우 기본적으로 서버리스 기능에 대해 작업 영역이 사용하도록 설정됩니다. 이 변경의 일환으로, 서버리스 SQL Warehouse를 사용하거나 사용하지 않도록 설정하는 작업 공간 수준 설정이 작업 공간 설정 UI에서 제거되었습니다.
계정 및 작업 영역에 대한 서버리스 컴퓨팅 설정 변경
2023년 5월 3~12일
이제 지역에서 지원하는 경우 모든 작업 영역에서 서버리스 SQL Warehouse를 사용할 수 있습니다.
Azure Databricks는 각 작업 영역의 Databricks SQL UI에서 모든 작업 영역 관리자에게 한 번 알 수 있습니다.
서버리스 SQL 웨어하우스를 지원하기 위해 새로 사용하도록 설정된 작업 영역의 경우 각 작업 영역은
Databricks SQL Serverless가 일반 공급됨
2023년 5월 3~12일
이제 Databricks SQL Serverless는 지원되는 지역에서 일반 공급 됩니다. 서버리스 SQL Warehouse는 SQL 쿼리에 대한 즉각적인 컴퓨팅, 최소한의 관리 및 비용 최적화를 제공합니다. 서버리스 SQL Warehouse를 생성하거나 프로 또는 클래식 SQL Warehouse를 서버리스로 전환하세요.
보안 클러스터 연결 또는 Azure Private Link를 사용하여 기존 작업 영역 업그레이드(공개 미리 보기)
2023년 5월 3일
기존 작업 영역에 SCC(보안 클러스터 연결)를 사용하도록 설정하여 VNet에 열린 포트가 없고 Databricks 런타임 클러스터 노드에 공용 IP 주소가 없도록 할 수 있습니다. 이 기능은 이름 No Public IP(enableNoPublicIp)를 사용하여 Azure 템플릿에서 구성됩니다.
사용자와 Databricks 작업 공간 간, 그리고 컴퓨팅 리소스와 Azure Databricks 인프라의 컨트롤 플레인 간의 비공개 연결을 위해 기존 작업 공간에서 Azure Private Link를 사용 또는 사용하지 않도록 설정할 수 있습니다.
두 업데이트 모두 작업 영역에서 VNet 삽입 및 프리미엄 가격 책정 계층을 사용해야 합니다.
DBFS에서 클러스터 범위 init 스크립트 사용 중단
2023년 5월 2일
DBFS의 클러스터 범위 초기화 스크립트는 더 이상 사용되지 않습니다. 대신 작업 영역 파일로 저장해야 합니다. 작업 영역 파일에 init 스크립트 저장을 참조하세요.
통합 탐색(공개 미리 보기)
2023년 5월 1일
새로운 통합 탐색 환경은 공개 미리 보기로 제공됩니다. 통합 탐색은 제품 영역 전체에서 작업을 완료하는 데 필요한 클릭 및 컨텍스트 스위치를 줄입니다. 자세한 내용은 작업 영역 탐색을 참조하세요.