2023년 6월
이러한 기능 및 Azure Databricks 플랫폼 개선 사항은 2023년 6월에 릴리스되었습니다.
참고 항목
릴리스가 준비되었습니다. Azure Databricks 작업 영역은 초기 릴리스 날짜 후 일주일 이후까지 업데이트되지 않을 수 있습니다.
Databricks Terraform 공급자 버전이 1.20.0으로 업데이트됨
2023년 6월 29일
Databricks Terraform 공급자 버전 1.20.0은 Unity 카탈로그 databricks_catalog_workspace_binding 리소스에 대한 지원을 추가하고 계정 수준에서 사용자 및 그룹의 내보내기를 향상시킵니다. 자세한 내용은 1.20.0 버전의 변경 로그를 참조하세요.
Databricks CLI가 버전 0.200.1으로 업데이트됨(공개 미리 보기)
2023년 6월 28일
Databricks CLI 버전 0.200.1에서는 fs ls 및 fs cp 명령이 업데이트되고, fs 명령의 기본값으로 로컬 파일을 지원하며, repos create 명령에 공급자 감지를 추가하는 등의 기능이 추가되었습니다. 자세한 내용은 0.200.1 버전의 변경 로그를 참조하세요.
Go용 Databricks SDK가 버전 0.12.0으로 업데이트됨(베타)
2023년 6월 28일
Databricks SDK for Go 버전 0.12.0은 작업 수준 매개 변수 및 매개 변수 정의, 작업 작업 조건부 실행 및 다른 서비스에 대한 몇 가지 버그 수정에 대한 지원을 추가합니다. 자세한 내용은 0.12.0 버전의 변경 로그를 참조하세요.
Go용 Databricks SDK가 버전 0.11.0으로 업데이트됨(베타)
2023년 6월 28일
Go용 Databricks SDK 버전 0.11.0은 수십 가지의 추가, 이름 변경 및 통합을 포함하여 Go API에 몇 가지 획기적인 변경 사항을 도입했습니다. 자세한 내용은 0.11.0 버전의 변경 로그를 참조하세요.
Python용 Databricks SDK (베타)
2023년 6월 28일
이제 Python용 Databricks SDK를 베타로 사용할 수 있습니다. Python용 Databricks SDK를 사용하면 Python 코드를 실행하여 Azure Databricks 계정, 작업 영역 및 리소스를 자동화할 수 있습니다.
Python용 Databricks SDK를 참조하세요.
Go용 Databricks SDK(베타)
2023년 6월 28일
이제 Go용 Databricks SDK를 베타로 사용할 수 있습니다. Go용 데이터브릭 SDK를 사용하면 Go 코드를 실행하여 Azure 데이터브릭 계정, 작업 영역 및 리소스를 자동화할 수 있습니다.
Go용 Databricks SDK를 참조하세요.
감사 로그, 청구 가능 사용량 및 계보 시스템 테이블 액세스(공개 미리 보기)
2023년 6월 28일
이제 계정 관리자는 Azure Databricks 계정의 시스템 테이블에 대한 액세스를 사용하도록 설정할 수 있습니다. 시스템 테이블은 계정 운영 데이터의 Azure Databricks 호스팅 분석 저장소입니다. 시스템 테이블은 쉽게 액세스할 수 있는 계정 전체의 관찰성 데이터를 제공합니다.
자세한 내용은 시스템 테이블 을 사용하여 계정 활동 모니터링을 참조하세요.
Unity 카탈로그의 모델(공개 미리 보기)
2023년 6월 28일
이제 MLflow 모델 레지스트리 워크플로를 업그레이드하여 Unity 카탈로그를 통해 모델을 제어할 수 있습니다. Unity 카탈로그는 중앙 집중식 액세스 제어, 감사, 계보, 작업 영역 간 모델 공유 및 더 나은 MLOps 배포 워크플로를 제공합니다. Databricks는 나중에 더 이상 사용되지 않을 기존 작업 영역 모델 레지스트리 대신 Unity 카탈로그에서 모델을 사용하는 것이 좋습니다. 자세한 내용은 Unity 카탈로그
이제 Databricks Marketplace가 일반 공급됨
2023년 6월 27일
이제 Databricks Marketplace를 사용하여 주요 공급자의 수백 개 데이터 제품과 노트북을 발견하고, 접근하며, AI와 분석 워크플로에 배포할 수 있습니다. 공개 미리 보기가 시작된 이후의 주요 내용으로는 Dun 및 Bradstreet, LexisNexis, Refinitiv(런던 증권거래소 그룹), YipitData 및 ZoomInfo를 비롯한 새로운 공급자와 USE_MARKETPLACE_ASSETS 권한을 사용하여 개인 교환 및 간소화된 소비자 권한 관리가 추가되었습니다.
Databricks Marketplace란?을 참조하세요.
Databricks Runtime 13.2(베타)
2023년 6월 26일
이제 Databricks Runtime 13.2 및 Databricks Runtime 13.2 ML 베타 릴리스로 사용할 수 있습니다.
Databricks Runtime 13.2(EoS) 및 Machine Learning용 Databricks Runtime 13.2(EoS)을 참조하세요.
Visual Studio Code용 Databricks 확장(일반 공급)
2023년 6월 26일
이제 Visual Studio Code용 Databricks 확장이 일반 공급으로 제공됩니다. IDE를 종료하지 않고 Lakehouse에 연결하고, 대화형 디버깅을 수행하고, Jupyter Notebook을 실행합니다. IDE의 코드 탐색, 리팩터링, 완료 및 오류 식별을 사용합니다.
Visual Studio Code용 Databricks 익스텐션을 참조하세요.
템플릿 없이 Azure CLI 및 Powershell을 사용하여 고객 관리형 키 사용
2023년 6월 23일
이제 템플릿을 사용하지 않고 Azure CLI 및 Powershell을 사용하여 관리되는 서비스 및 관리 디스크에 대해 고객 관리형 키를 사용하도록 설정할 수 있습니다. 이는 이미 DBFS에 대한 고객 관리형 키에 사용할 수 있었습니다. 관리형 서비스에 대해 고객 관리 키를 사용하도록 설정, Azure 관리 디스크에 대한 고객 관리 키 구성 및 DBFS 루트에 대한 고객 관리 키를 참조하세요.
서버리스 SQL Warehouse는 백 엔드 Azure Private Link를 사용하도록 설정된 상태에서 작동합니다.
2023년 6월 22일
백 엔드 Azure Private Link를 사용하도록 설정하면 서버리스 SQL Warehouse가 더 이상 시작되지 않습니다. 서버리스 컴퓨팅 리소스는 사용하도록 설정된 경우 백 엔드 Azure Private Link 연결을 사용하지 않습니다. 서버리스 SQL 웨어하우스 사용하도록 설정하고 Azure Private Link 백 엔드 및 프런트 엔드 연결사용하도록 설정합니다.
Azure Databricks 작업 UI에서 완료된 작업 실행에 대한 시각적 개요 참조
2023년 6월 22일
향상된 Azure Databricks 작업 UI는 완료된 작업 실행에 대한 시각적 개요, 실행 상태 및 시간별로 필터링 가능, 가장 일반적인 작업 오류 목록을 제공합니다. 기본 시간 필터는 이전 48시간을 포함합니다. 모든 작업최근 작업 실행 보기를 참조하세요.
Databricks CLI (공개 미리 보기)
2023년 6월 21일
Databricks 명령줄 인터페이스(Databricks CLI)는 대대적인 점검을 거쳤습니다. 새 CLI는 모든 Databricks REST API 작업을 포함하고 모든 Azure Databricks 인증 유형을 지원합니다. macOS 및 Linux 사용자는 Homebrew를 사용하여 새 CLI를 설치할 수 있습니다. Windows도 지원됩니다.
List all jobs 및 List job runs API 요청에서 결과의 페이지 매김이 개선됨
2023년 6월 14일
이제 page_token 매개 변수를 사용하여 GET /api/2.1/jobs/list 및 GET /api/2.1/jobs/runs/list 작업 API 요청에 의해 반환된 결과를 페이지 할 수 있습니다. 이 토큰 기반 페이지 매김은 사용되지 않는 offset 및 limit 매개 변수를 대체하고 이러한 요청에 대한 서비스 확장성을 향상시킵니다.
전체 페이지 작업 영역 브라우저에 리포지토리가 포함됨
2023년 6월 14일
이제 전체 페이지 작업 영역 브라우저 환경이 Repos로 확장됩니다. 사이드바에서 작업 영역을 클릭하여 작업 영역 콘텐츠와 함께 Databricks Repos의 콘텐츠를 찾아볼 수 있습니다. 상황에 맞는 브라우저를 사용하여 Notebook 내에서 콘텐츠를 찾아볼 수도 있습니다. 전체 페이지 작업 영역 브라우저에 대한 자세한 내용은 작업 영역 탐색 및 작업 영역 브라우저을 참조하세요.
Databricks Terraform 공급자 버전이 1.19.0으로 업데이트됨
2023년 6월 14일
Databricks 테라폼 공급자 1.19.0은 run_as와 run_as_user_name를 databricks_job에 추가하고, databricks_cluster_policy에 더 많은 속성을 추가하고, force_destroy를 databricks_external_location에 추가하는 등의 기능을 추가했습니다. 자세한 내용은 버전 1.19.0에 대한 변경 로그를 참조하세요.
서비스 주체로 작업 실행(공개 미리 보기)
2023년 6월 13일
이제 Azure Databricks 사용자, 서비스 주체 및 그룹에게 서비스 주체를 사용할 수 있는 권한을 부여할 수 있습니다. 이렇게 하면 사용자가 작업을 작업 소유자의 ID로 실행하는 대신 서비스 주체로 실행하여 사용자가 조직을 떠나거나 그룹이 수정되는 경우 작업이 실패하지 않도록 할 수 있습니다.
서비스 주체를 관리하기 위한 역할 및 작업 실행을 위한 ID 구성을 참조하세요.
새 서비스 주체 UI가 더 나은 관리 환경을 제공함
2023년 6월 13일
이제 새 서비스 주체 UI를 사용하여 작업 영역에서 서비스 주체를 관리할 수 있습니다. 서비스 주체 UI를 사용하면 작업 영역에 서비스 주체를 추가하고, 자격을 구성하고, 서비스 주체 권한을 관리할 수 있습니다. 서비스 주체 관리를 참조하세요.
사용자가 작업 영역에 다시 추가될 때 복원된 홈 폴더
2023년 6월 9일
관리자가 작업 영역에서 사용자를 제거한 다음 다시 추가하면 사용자의 홈 폴더가 복원됩니다. 이전에는 작업 영역에 다시 추가되면 사용자가 빈 홈 폴더를 새로 받았습니다. 이전 홈 폴더는 백업으로 유지되었습니다. 작업 영역 폴더에 대한 자세한 내용은 작업 영역 개체를 폴더로 구성을 참조하세요.
Databricks Marketplace: 이제 사설 교환을 사용할 수 있음
2023년 6월 7일
프라이빗 교환을 사용하면 데이터 공급자가 선택한 초대된 소비자 그룹과 데이터 제품을 공유할 수 있습니다. 비공개 목록은 초대된 소비자의 Marketplace 홈페이지에 표시되지만 퍼블릭 마켓플레이스에는 표시되지 않습니다. Databricks Marketplace에서 프라이빗 교환 만들기 및 관리를 참조하세요.
Databricks Marketplace: 소비자가 UI를 사용하여 데이터 제품을 제거할 수 있음
2023년 6월 5일
이제 데이터 소비자는 Marketplace 내 요청 인터페이스를 사용하여 모든 데이터 제품을 제거할 수 있습니다 . 설치된 데이터 제품 삭제를 참조하세요.
Databricks Marketplace: 공급자가 자신의 프로필을 만들 수 있습니다.
2023년 6월 5일
이제 데이터 공급자는 공급자 애플리케이션이 승인되면 자신의 프로필을 만들고 업데이트할 수 있습니다. Marketplace 제공자 프로필 만들기를 참조하세요.
Python용 Databricks Connect V2가 일반 공급됨
2023년 6월 2일
Databricks 런타임 13.1부터 Databricks Connect는 이제 Python에서 일반적으로 사용할 수 있습니다. 이 릴리스에서는 구조적 스트리밍, 모든 델타 기능 및 Spark의 Pandas에 대한 지원을 추가합니다. 또한 포함된 Python용 Databricks SDK를 사용하여 OAuth(실험적)에 대한 지원도 포함합니다.
Databricks Terraform 공급자 버전이 1.18.0으로 업데이트됨
2023년 6월 2일
Databricks 테라폼 공급자 1.18.0은 databricks_volume 리소스, databricks_model_serving를 databricks_permissions에 지원하는 등의 기능을 추가합니다. 자세한 내용은 버전 1.18.0에 대한 변경 로그를 참조하세요.
새 Databricks Marketplace 공급자
2023년 6월 1일
8개의 새로운 공급자가 지난 달 Databricks Marketplace에 목록을 게시했습니다. 여기에는 다음이 포함됩니다.
- IQVIA: 의료 및 생명 과학 데이터.
- 모닝스타: ESG 위험 등급 데이터와 같은 데이터 및 연구 인사이트를 제공하는 투자입니다.
- 바이살라: 날씨 및 환경 데이터입니다.
- 수칼리: 헤지 펀드와 투자자를 위한 부동산 성과 지표입니다.
- Veritas Data Research: 2010년부터 현재까지의 미국 사망률 데이터의 포괄적인 인덱스입니다.
- 수집가 데이터 저장소: 광고주와 소비자를 위한 스포츠 및 거래 카드 데이터입니다.
- Tego Cyber: 사이버 보안 및 위협 인텔리전스 데이터
- 리본 상태: 의료 공급자 데이터입니다.
이러한 공급자 또는 Marketplace에 대한 질문이 있는 경우 dataconsumers@databricks.com문의하세요.
Databricks Marketplace란?도 참조하세요.
Databricks Runtime 13.1이 GA로 제공됨
2023년 6월 1일
이제 Databricks Runtime 13.1 및 Databricks Runtime 13.1 ML이 일반 공급됩니다.
Databricks Runtime 13.1(EoS) 및 Machine Learning용 Databricks Runtime 13.1(EoS)을 참조하세요.
통합 스키마 브라우저를 사용하여 Notebook, SQL 편집기 및 카탈로그 탐색기에서 데이터 보기(공개 미리 보기)
2023년 6월 1일
새로운 통합 스키마 브라우저를 사용하면 Notebook 또는 SQL 편집기를 종료하지 않고 Unity 카탈로그 메타스토어의 모든 데이터를 볼 수 있습니다.
카탈로그 탐색기에 대한 자세한 내용은 카탈로그 탐색기참조하세요.
Notebook에서 카탈로그 탐색기에 액세스하는 방법에 대한 자세한 내용은 데이터 찾아보기참조하세요.