Wrzesień 2023

Te funkcje i ulepszenia platformy Azure Databricks zostały wydane we wrześniu 2023 r.

Uwaga

Wydania są etapowe. Obszar roboczy usługi Azure Databricks może nie zostać zaktualizowany do tygodnia lub więcej po początkowej dacie wydania.

Federacja Lakehouse dostępna w klastrach dla pojedynczego użytkownika

29 września 2023 r.

Federacja Lakehouse jest teraz dostępna w klastrach z pojedynczym użytkownikiem przy użyciu środowiska Databricks Runtime 13.1 lub nowszego. Tylko właściciel połączenia może uruchamiać zapytania dotyczące wykazów federacyjnych. Zobacz Co to jest Federacja Lakehouse?.

Deleguj możliwość tworzenia poświadczeń magazynu w Unity Catalog

29 września 2023 r.

Teraz możesz przyznać użytkownikom uprawnienia do tworzenia poświadczeń dostępu do magazynu w metadanych katalogu Unity za pomocą nowego uprawnienia CREATE STORAGE CREDENTIAL. Zobacz CREATE STORAGE CREDENTIAL (TWORZENIE POŚWIADCZEŃ MAGAZYNU).

Databricks Runtime 14.1 (wersja beta)

28 września 2023 r.

Środowiska Databricks Runtime 14.1 i Databricks Runtime 14.1 ML są teraz dostępne jako wersje beta.

Zobacz Databricks Runtime 14.1 i Databricks Runtime 14.1 for Machine Learning ( Środowisko Databricks Runtime 14.1 i Databricks Runtime 14.1).

Model procesora GPU obsługujący zoptymalizowany pod kątem llMs w publicznej wersji zapoznawczej

28 września 2023 r.

Model obsługujący usługę Azure Databricks obsługuje wdrażanie modeli PyTorch i TensorFlow przy użyciu zasobów obliczeniowych procesora GPU. Ta funkcja jest dostępna w publicznej wersji zapoznawczej w wybranych regionach, a także dotyczy wdrażania modeli przy użyciu GPU zarejestrowanych przy użyciu profili mlflow.pyfunc, mlflow.pytorch, mlflow.tensorflowi mlflow.transformers. Zobacz Typy obciążeń procesora GPU.

Ta wersja zapoznawcza obejmuje również obsługę wdrażania procesora GPU zoptymalizowanego pod kątem obsługi dużych modeli językowych. Zobacz Obsługa zoptymalizowanego modelu dużego języka (LLM)

Zapobiegaj pomijaniu przebiegów zadania po osiągnięciu limitów współbieżności

27 września 2023 r. — 2 października 2023 r.

Aby zapobiec pomijaniu przebiegów zadania usługi Azure Databricks z powodu limitów współbieżności, możesz teraz włączyć kolejkowanie zadania. Po włączeniu kolejkowania, jeśli zostanie osiągnięty limit współbieżności, zadanie zostanie umieszczone w kolejce, dopóki nie będzie dostępnych zasobów, aby uruchomić zadanie. Zobacz Włączanie kolejkowania przebiegów zadań.

Dostawca narzędzia Terraform usługi Databricks został zaktualizowany do wersji 1.27.0

27 września 2023 r.

Dostawca narzędzia Terraform usługi Databricks w wersji 1.27.0 dodaje owner element i force_destroy do databricks_metastore_data_accessprogramu , zawiera kilka dodatkowych ulepszeń i poprawek błędów i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.27.0.

Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.206.0 (publiczna wersja zapoznawcza)

27 września 2023 r.

Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.206.0. Ta wersja umożliwia zastępowanie docelowe klastrów potoków w pakietach zasobów usługi Databricks, usprawnia środowisko inicjowania szablonu pakietu i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.206.0.

Zestaw SDK usługi Databricks dla języka Go został zaktualizowany do wersji 0.21.0 (beta)

27 września 2023 r.

Zestaw SDK usługi Databricks dla języka Go w wersji 0.21.0 wprowadza kilkanaście przełomowych zmian interfejsu API, dodaje kilkanaście interfejsów API i dodaje kilkanaście pól. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.21.0.

Tabele wnioskowania dla punktów końcowych obsługujących model to publiczna wersja zapoznawcza

26 września 2023 r.

Włącz tabele inferencyjne na punktach końcowych obsługujących model, aby przechwytywać przychodzące żądania i wychodzące odpowiedzi z tych punktów końcowych oraz rejestrować je jako tabelę Delta katalogu Unity. Z kolei możesz użyć danych w tej tabeli do monitorowania, debugowania i ulepszania modeli uczenia maszynowego. Zobacz tabele wnioskowania na potrzeby monitorowania i debugowania modeli.

Aby zarejestrować się w publicznej wersji zapoznawczej, skontaktuj się z zespołem konta usługi Azure Databricks.

Sterownik ODBC usługi Databricks 2.7.5

23 września 2023 r.

Wydaliśmy wersję 2.7.5 sterownika Databricks ODBC (pobierz). W tej wersji dodano następujące nowe funkcje i ulepszenia:

• Rozszerzenie uwierzytelniania klienta OAuth 2.0 i obsługa odnajdywania punktów końcowych OIDC.
• Szyfrowanie po stronie serwera przy użyciu kluczy dostarczonych przez klienta.
• Funkcja Timedate.
• Ulepszona obsługa komunikatów o błędach na potrzeby pobierania w chmurze.
• Aktualizacje zabezpieczeń.

Ta wersja rozwiązuje również następującą regresję w wersji 2.7.3:

• Funkcja SQLForeignKeys zwraca pusty wynik, jeśli wywołujący przekazuje wartość NULL dla katalogu tabeli podstawowej lub tabeli obcej.

Wersja 2.7.5 teraz zwraca wszystkie klucze podstawowe i klucze obce skojarzone z powiązaną tabelą, jeśli katalog innej tabeli jest ustawiony na NULL.

Rozszerzenie usługi Databricks dla programu Visual Studio Code zostało zaktualizowane do wersji 1.1.3

21 września 2023 r.

Rozszerzenie databricks dla programu Visual Studio Code w wersji 1.1.3 dodaje kilka drobnych poprawek. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.1.3.

Uruchamianie zadań jako jednostki usługi jest ogólnie dostępne

21 września 2023 r.

Role dla jednostek usługi i ustawienie zadania do uruchamiania zadań przy użyciu tożsamości jednostki usługi jest teraz ogólnie dostępne.

Zobacz Role do zarządzania jednostkami usługi i Konfigurowanie tożsamości dla przebiegów zadań.

Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.205.2 (publiczna wersja zapoznawcza)

21 września 2023 r.

Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.205.2. Ta wersja zawiera kilka aktualizacji pomocniczych. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.205.2.

Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.205.1 (publiczna wersja zapoznawcza)

20 września 2023 r.

Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.205.1. W tej wersji można zastąpić docelowe zadania podrzędne w pakietach zasobów usługi Databricks i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.205.1.

Zestaw SDK usługi Databricks dla języka Go został zaktualizowany do wersji 0.20.0 (beta)

20 września 2023 r.

Zestaw SDK usługi Databricks dla języka Go w wersji 0.20.0 dodaje kilkanaście interfejsów API, dodaje pół tuzina pól, zmienia kilka pól i metod i usuwa kilka interfejsów API. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.20.0.

Zestaw SDK usługi Databricks dla języka Python został zaktualizowany do wersji 0.9.0 (beta)

20 września 2023 r.

Zestaw SDK usługi Databricks dla języka Python w wersji 0.9.0 zmienia kilka metod i pól, dodaje około 10 pól, dodaje około 20 klas danych i wprowadza dodatkowe zmiany i usunięcia. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.9.0.

Zestaw SDK usługi Databricks dla języka Python został zaktualizowany do wersji 0.7.1 (beta)

20 września 2023 r.

Zestaw SDK usługi Databricks dla języka Python w wersji 0.7.1 zawiera poprawkę pomocniczą, aby zwiększyć wydajność pobierania plików. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.7.1.

Dostawca narzędzia Terraform usługi Databricks został zaktualizowany do wersji 1.26.0

20 września 2023 r.

dostawca Terraform dla Databricks w wersji 1.26.0 dodaje obsługę skryptów inicjowania z woluminów Unity Catalog, obejmuje kilka dodatkowych ulepszeń, poprawek błędów i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.26.0.

Databricks Connect dla środowiska Databricks Runtime 14.0

20 września 2023 r.

Usługa Databricks Connect dla środowiska Databricks Runtime 14.0 obsługuje pełne przesyłanie strumieniowe ze strukturą (w tym foreachBatch) i długotrwałe zapytania, które są ponownie dołączane do zapytania po przerwie.

Pulpity nawigacyjne usługi Lakeview w publicznej wersji zapoznawczej

20 września 2023 r.

Pulpity nawigacyjne usługi Lakeview umożliwiają udostępnianie wizualizacji i zestawów danych przy użyciu uproszczonego i ujednoliconego modelu ładu danych. Zobacz Pulpity nawigacyjne.

Databricks Connect V2 to publiczna wersja zapoznawcza dla języka Scala

19 września 2023 r.

Usługa Databricks Connect dla środowiska Databricks Runtime 13.3 LTS obsługuje teraz język Scala w publicznej wersji zapoznawczej, w tym ramki danych, delta, przesyłanie strumieniowe ze strukturą i nie tylko.

W przypadku języka Python anulowanie zapytań jest teraz obsługiwane, a DatabricksSession klasa może być teraz używana w notesach i zadaniach usługi Azure Databricks.

Model procesora GPU obsługujący publiczną wersję zapoznawcza

19 września 2023 r.

Model obsługujący usługę Azure Databricks obsługuje wdrażanie modeli PyTorch i TensorFlow przy użyciu zasobów obliczeniowych procesora GPU. Ta funkcja jest dostępna w [publicznym podglądzie] w wybranych regionach i dotyczy również wdrażania modeli zapisanych w wersjach mlflow.pyfunc, mlflow.pytorch, mlflow.tensorflowi mlflow.transformers. Zobacz Typy obciążeń procesora GPU.

Obliczenia cech na żądanie są teraz dostępne w Unity Catalog (wersja publiczna wstępna)

14 września 2023 r.

Funkcje uczenia maszynowego można teraz obliczyć na żądanie w czasie wnioskowania. Logika obliczeniowa cech, modele i dane są zarządzane przez Unity Catalog. Umożliwia to modelom obliczanie funkcji przy użyciu danych wejściowych, które są dostępne tylko w czasie wnioskowania, takich jak bieżąca lokalizacja użytkownika. Aby uzyskać więcej informacji, zobacz Funkcje obliczeniowe na żądanie przy użyciu funkcji zdefiniowanych przez użytkownika języka Python.

Databricks Runtime 14.0 to ogólna dostępność

14 września 2023 r.

Środowiska Databricks Runtime 14.0 i Databricks Runtime 14.0 ML są teraz ogólnie dostępne.

Zobacz Databricks Runtime 14.0 (EoS) i Databricks Runtime 14.0 for Machine Learning (EoS).

Uaktualnianie powiadomień e-mail konta

14 września 2023 r.

Usługa Databricks nie wysyła już powiadomień e-mail po dodaniu użytkowników do konta usługi Azure Databricks. Użytkownicy będą nadal otrzymywać powiadomienia e-mail po udzieleniu im dostępu do obszaru roboczego.

Dostawca narzędzia Terraform usługi Databricks został zaktualizowany do wersji 1.25.1

13 września 2023 r.

Dostawca narzędzia Terraform usługi Databricks w wersji 1.25.1 został wydany z niewielkimi ulepszeniami i poprawkami błędów. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.25.1.

Zestaw SDK usługi Databricks dla języka Go został zaktualizowany do wersji 0.19.2 (beta)

13 września 2023 r.

Zestaw SDK usługi Databricks dla języka Go w wersji 0.19.2 zawiera jedną poprawkę pomocniczą. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.19.2.

Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.205.0 (publiczna wersja zapoznawcza)

13 września 2023 r.

Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.205.0. Jest to pierwsza wersja interfejsu wiersza polecenia usługi Databricks do obsługi pakietów zasobów usługi Databricks w publicznej wersji zapoznawczej. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.205.0.

Lokalizacja zarezerwowana dla /Workspace

13 września 2023 r.

Lokalizacja /Workspace jest teraz zarezerwowana. Nie można już zdefiniować katalogu o nazwie /Workspace względnej względem ścieżki głównej w usłudze Azure Databricks.

Pakiety zasobów usługi Databricks (publiczna wersja zapoznawcza)

12 września 2023 r.

Pakiety zasobów usługi Databricks, teraz w publicznej wersji zapoznawczej, umożliwiają kompleksowe dane, analizy i projekty uczenia maszynowego, które mają być wyrażane jako kolekcja plików źródłowych. Ułatwia to stosowanie najlepszych rozwiązań inżynierii danych, takich jak kontrola źródła, przegląd kodu, testowanie i ciągła integracja/ciągłe wdrażanie.

Dostawca narzędzia Terraform usługi Databricks został zaktualizowany do wersji 1.25.0

12 września 2023 r.

Dostawca narzędzia Terraform usługi Databricks w wersji 1.25.0 obejmuje dodanie IS_OWNER uprawnień do magazynów SQL usługi Databricks, drobnych poprawek, aktualizacji dokumentacji i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.25.0.

Rozszerzenie usługi Databricks dla programu Visual Studio Code zostało zaktualizowane do wersji 1.1.2

12 września 2023 r.

Rozszerzenie usługi Databricks dla programu Visual Studio Code w wersji 1.1.2 dodaje eksperymentalną obsługę %run notesów usługi Azure Databricks i # MAGIC w notesach usługi Azure Databricks, rozwiązuje problemy ze ścieżką wielu lokalnych instalacji interfejsu wiersza polecenia usługi Databricks i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 1.1.2.

Program Partner Connect obsługuje rozwiązanie Snowplow

12 września 2023 r.

Teraz możesz użyć programu Partner Connect, aby połączyć obszar roboczy usługi Azure Databricks z aplikacją Snowplow. Aby uzyskać więcej informacji, zobacz Nawiązywanie połączenia z systemem Snowplow.

Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.204.1 (publiczna wersja zapoznawcza)

11 września 2023 r.

Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.204.1. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.204.1.

Filtrowanie poufnych danych przy użyciu filtrów wierszy i masek kolumn (publiczna wersja zapoznawcza)

11 września 2023 r.

Teraz można stosować filtry wierszy i maski kolumn do tabel, aby uniemożliwić dostęp do poufnych danych przez niektórych użytkowników. Te filtry i maski są implementowane jako funkcje zdefiniowane przez użytkownika SQL (UDF). Zobacz Filtrowanie poufnych danych tabeli przy użyciu filtrów wierszy i masek kolumn.

Tabele systemowe obejmują teraz schemat witryny Marketplace (publiczna wersja zapoznawcza)

8 września 2023 r.

tabele systemu zawierają teraz schemat marketplace, który przechowuje dane dostawcy witryny Marketplace. Możesz wysłać zapytanie do tabeli marketplace.listing_access_events, aby pobrać informacje o konsumentach dotyczące działań podjętych na twoich listingach. Aby uzyskać więcej informacji, zobacz tabele systemowe witryny Marketplace — dokumentacja.

Tabela systemu cenowego jest teraz dostępna (publiczna wersja zapoznawcza)

8 września 2023 r.

tabele systemowe teraz zawierają tabelę cenową (system.billing.list_prices), w której można monitorować koszt jednostki SKU w czasie. Te dzienniki mogą ułatwić przeprowadzanie analizy kosztów i monitorowanie zmian cen. Zobacz dokumentację tabeli systemu cenowego .

Zestaw SDK usługi Databricks dla języka Go został zaktualizowany do wersji 0.19.1 (beta)

7 września 2023 r.

Zestaw SDK usługi Databricks dla języka Go w wersji 0.19.1 kontynuuje kilka drobnych aktualizacji i poprawek. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.19.1.

Sterownik ODBC usługi Databricks 2.7.3

7 września 2023 r.

Wydaliśmy wersję 2.7.3 sterownika Databricks ODBC (pobierz). Ta wersja zawiera następujące funkcje i poprawki:

• Poprawki luk w zabezpieczeniach przez uaktualnienie zależności innych firm.
• SQL_ATTR_MAX_ROWS obsługę, która umożliwia klientowi ograniczenie liczby wierszy do pobrania w zapytaniu w celu przyspieszenia szybkiego ładowania (na przykład w wersji zapoznawczej).
• Zaktualizowano obsługę systemu MacOS. Sterownik obsługuje teraz apple Silicon/M1.
• Obsługa uwierzytelniania opartego na przeglądarce OAuth2 w celu ułatwienia logowania jednokrotnego.

Ważne

Jeśli używasz interfejsów API klucza podstawowego i klucza obcego, funkcja SQLForeignKeys zwraca pusty wynik, jeśli obiekt wywołujący przekazuje wartość NULL dla katalogu tabeli podstawowej lub tabeli obcej. Ten problem jest znany deweloperom.

Interfejs wiersza polecenia usługi Databricks został zaktualizowany do wersji 0.204.0 (publiczna wersja zapoznawcza)

6 września 2023 r.

Interfejs wiersza polecenia usługi Databricks (interfejs wiersza polecenia usługi Databricks) został zaktualizowany do wersji 0.204.0. Ta wersja obejmuje grupowanie poleceń powiązanych z uprawnieniami, dodawanie i wprowadzanie zmian w kilku poleceniach i nie tylko. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.204.0.

Eksplorator danych jest teraz Eksploratorem wykazu

6 września 2023 r.

Nazwa Eksploratora danych została zmieniona na Eksplorator katalogu, uznając, że można go użyć do pracy ze wszystkimi chronionymi obiektami w Unity Catalog, a nie tylko obiektami danych. Zobacz Co to jest Eksplorator katalogu?.

Zestaw SDK usługi Databricks dla języka Go został zaktualizowany do wersji 0.19.0 (beta)

4 września 2023 r.

Zestaw SDK usługi Databricks dla języka Go w wersji 0.19.0 zmienia nazwy interfejsów API uprawnień, dodaje 8 interfejsów API, dodaje 5 pól, zmienia i usuwa kilka pól oraz zmienia kilka metod. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.19.0.

Zestaw SDK usługi Databricks dla języka Python został zaktualizowany do wersji 0.8.0 (beta)

4 września 2023 r.

Zestaw SDK usługi Databricks dla języka Python w wersji 0.8.0 zmienia nazwy interfejsów API uprawnień, dodaje pół tuzina pól, dodaje pół tuzina klas danych i wprowadza kilka zmian i usuwania. Aby uzyskać szczegółowe informacje, zobacz dziennik zmian dla wersji 0.8.0.

Delegowanie uprawnień listy dozwolonych w Unity Catalog

1 września 2023 r.

Teraz możesz delegować uprawnienia do zarządzania pozycjami na liście dozwolonych w katalogu Unity Catalog. Zobacz Allowlist libraries and init scripts on shared compute (Biblioteki dozwolonych i skrypty inicjowania w udostępnionych obliczeniach).

Integracja aplikacji GitHub w usłudze Repos to ogólna dostępność

1 września 2023 r.

Integracja aplikacji GitHub w usłudze Repos to ogólna dostępność. Ta funkcja umożliwia prostsze zarządzanie poświadczeniami Usługi Git podczas integracji z usługą GitHub w repozytoriach.

Ważne

Aplikacje GitHub nie są obsługiwane na serwerze GitHub Enterprise Server.