Maj 2024 r.

Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w maju 2024 r.

Uwaga

Wydania są etapowe. Twoje konto usługi Azure Databricks może nie zostać zaktualizowane do tygodnia lub więcej po początkowej dacie wydania.

Konfiguracja zapory bezserwerowej obsługuje teraz więcej typów obliczeniowych

31 maja 2024 r.

Usługa Azure Databricks obsługuje teraz konfigurowanie zapór dla zadań bezserwerowych, notesów, potoków usługi Delta Live Tables i modelu obsługującego dostęp do punktów końcowych procesora CPU przy użyciu konfiguracji łączności sieciowej (NCC). Administratorzy kont mogą tworzyć kontrolery domeny i dołączać je do obszarów roboczych, aby zapewnić bezpieczny i kontrolowany dostęp za pośrednictwem stabilnych podsieci.

Zobacz Konfigurowanie zapory na potrzeby bezserwerowego dostępu obliczeniowego.

Zakończenie obsługi środowiska Databricks Runtime 15.0

31 maja 2024 r.

Wsparcie dla środowisk Databricks Runtime 15.0 i Databricks Runtime 15.0 dla usługi Machine Learning zakończyło się 31 maja. Zobacz Cykle życia pomocy technicznej usługi Databricks.

Databricks Runtime 15.3 (wersja beta)

30 maja 2024 r.

Środowiska Databricks Runtime 15.3 i Databricks Runtime 15.3 ML są teraz dostępne jako wersje beta.

Zobacz Databricks Runtime 15.3 (EoS) i Databricks Runtime 15.2 for Machine Learning (EoS).

Interfejs użytkownika metryk obliczeniowych jest teraz dostępny we wszystkich wersjach środowiska Databricks Runtime

30 maja 2024 r.

Interfejs użytkownika metryk obliczeniowych został wdrożony we wszystkich wersjach środowiska Databricks Runtime. Wcześniej te metryki były dostępne tylko dla zasobów obliczeniowych uruchomionych w środowisku Databricks Runtime 13.3 lub nowszym. Zobacz Wyświetlanie metryk obliczeniowych.

Ulepszone wyszukiwanie i filtrowanie w notesach i tabelach wyników edytora SQL

28 maja 2024 r.

Teraz możesz łatwo przeszukiwać kolumny i wybierać wartości filtru z listy rozwijanej istniejących wartości w tabelach wyników w notesach i edytorze SQL.

Nowy pulpit nawigacyjny ułatwia dostawcom usługi Databricks Marketplace monitorowanie użycia listy

28 maja 2024 r.

Nowy pulpit nawigacyjny analizy dostawcy umożliwia dostawcom usługi Databricks Marketplace monitorowanie widoków list, żądań i instalacji. Pulpit nawigacyjny pobiera dane z tabel systemowych witryny Marketplace. Zobacz Monitorowanie wyświetlania metryk użycia przy użyciu pulpitów nawigacyjnych.

Wyświetlanie zapytań federacyjnych generowanych przez system w programie Query Profile

24 maja 2024 r.

Federacja lakehouse obsługuje teraz wyświetlanie wygenerowanych przez system zapytań federacyjnych i ich metryk w profilu zapytania. Kliknij węzeł skanowania federacji w widoku grafu, aby wyświetlić zapytanie wypchnięte do źródła danych. Zobacz Wyświetlanie zapytań federacyjnych generowanych przez system.

Adresy IP wychodzące płaszczyzny obliczeniowej muszą zostać dodane do listy dozwolonych adresów IP obszaru roboczego

24 maja 2024 r.

Jeśli używasz bezpiecznych list dostępu do klastra i adresów IP w obszarze roboczym, musisz dodać wszystkie publiczne adresy IP używane przez płaszczyznę obliczeniową w celu uzyskania dostępu do płaszczyzny sterowania do listy dozwolonych lub skonfigurować usługę Private Link zaplecza. Ta zmiana wpłynie na wszystkie nowe obszary robocze 29 lipca 2024 r. i istniejące obszary robocze 26 sierpnia 2024 r. Aby uzyskać więcej informacji, zobacz wpis Społeczności usługi Databricks.

Jeśli na przykład włączysz bezpieczną łączność klastra w obszarze roboczym korzystającym z iniekcji sieci wirtualnej, usługa Databricks zaleca, aby obszar roboczy miał stabilny publiczny adres IP ruchu wychodzącego. Ten publiczny adres IP i inne osoby muszą znajdować się na liście dozwolonych. Zobacz Adresy IP ruchu wychodzącego podczas korzystania z bezpiecznej łączności klastra. Alternatywnie, jeśli używasz sieci wirtualnej zarządzanej przez usługę Azure Databricks i skonfigurujesz zarządzaną bramę translatora adresów sieciowych w celu uzyskania dostępu do publicznych adresów IP, te adresy IP muszą znajdować się na liście dozwolonych.

Zobacz Konfigurowanie list dostępu do adresów IP dla obszarów roboczych.

Protokół OAuth jest obsługiwany w usłudze Lakehouse Federation for Snowflake

24 maja 2024 r.

Wykaz aparatu Unity umożliwia teraz tworzenie połączeń snowflake przy użyciu protokołu OAuth. Zobacz Uruchamianie zapytań federacyjnych w usłudze Snowflake.

Zbiorcze przenoszenie i usuwanie obiektów obszaru roboczego z przeglądarki obszarów roboczych

24 maja 2024 r.

Teraz możesz wybrać wiele elementów w obszarze roboczym, aby przenieść lub usunąć. Po wybraniu wielu obiektów zostanie wyświetlony pasek akcji z opcjami przenoszenia lub usuwania elementów. Ponadto możesz wybrać wiele elementów przy użyciu myszy i przeciągnąć je do nowej lokalizacji. Istniejące uprawnienia do obiektów są nadal stosowane podczas operacji przenoszenia zbiorczego i usuwania.

Obiekty wykazu aparatu Unity są dostępne w ostatnich i ulubionych

23 maja 2024 r.

Możesz teraz znaleźć obiekty wykazu aparatu Unity, takie jak wykazy i schematy, na liście ostatnich. Można również ulubione obiekty wykazu aparatu Unity w Eksploratorze wykazu i przeglądarce schematu oraz znajdować ulubione obiekty na stronie głównej obszaru roboczego.

Nowy łącznik dbt-databricks w wersji 1.8.0 przyjmuje oddzieloną architekturę dbt

23 maja 2024 r.

Łącznik DBT-Databricks w wersji 1.8.0 jest pierwszą wersją do wdrożenia nowej, oddzielonej architektury dbt. Zamiast polegać na dbt-core, aby uwolnić klientów od konieczności określania wersji dla obu bibliotek, łącznik zależy teraz od współużytkowanej warstwy abstrakcji między adapterem a bazą danych. W związku z tym łącznik nie musi już być zgodny z wersją funkcji usługi Databricks do wersji dbt-core i jest bezpłatny do wdrażania semantycznych wersji. Oznacza to, że deweloperzy łączników nie muszą już wydawać znaczących funkcji, takich jak obliczenia na model jako poprawki.

Ta wersja obejmuje również następujące elementy:

• Ulepszenia deklaracji i działania zmaterializowanych widoków i tabel przesyłania strumieniowego, w tym możliwość planowania automatycznych odświeżeń.
• Obsługa zabezpieczanych tagów obiektów wykazu aparatu Unity. Aby odróżnić je od tagów dbt, które są metadanymi, które są często używane do wybierania modeli w operacji dbt, te tagi są nazwane databricks_tags w konfiguracji modelu.
• Kilka ulepszeń wydajności przetwarzania metadanych.

Nowe interfejsy API ustawień zgodności i zabezpieczeń (publiczna wersja zapoznawcza)

23 maja 2024 r.

Usługa Databricks wprowadziła nowe interfejsy API dla profilu zabezpieczeń zgodności, ulepszone monitorowanie zabezpieczeń i automatyczne ustawienia aktualizacji klastra w obszarach roboczych. Zobacz:

• Interfejs API profilu zabezpieczeń zgodności
• Rozszerzony interfejs API monitorowania zabezpieczeń
• Interfejs API automatycznej aktualizacji klastra

Databricks Runtime 15.2 to ogólna dostępność

22 maja 2024 r.

Środowiska Databricks Runtime 15.2 i Databricks Runtime 15.2 ML są teraz ogólnie dostępne.

Zobacz Databricks Runtime 15.2 (EoS) i Databricks Runtime 15.2 for Machine Learning (EoS).

Nowy łącznik Tableau na potrzeby udostępniania różnicowego

22 maja 2024 r.

Nowy łącznik udostępniania różnicowego tableau upraszcza program Tableau Desktop dostęp do danych, które zostały ci udostępnione przy użyciu protokołu udostępniania funkcji delta open sharing. Zobacz Tableau: Odczytywanie udostępnionych danych.

Nowe przykłady modeli rekomendacji uczenia głębokiego

22 maja 2024 r.

Usługa Databricks opublikowała dwa nowe przykłady ilustrujące nowoczesne modele rekomendacji uczenia głębokiego, w tym model dwu wieżowy i dlRM firmy Meta. Aby dowiedzieć się więcej na temat modeli rekomendacji uczenia głębokiego, zobacz Trenowanie modeli rekomendacji.

Wiązanie poświadczeń magazynu i lokalizacji zewnętrznych z określonymi obszarami roboczymi (publiczna wersja zapoznawcza)

22 maja 2024 r.

Teraz można powiązać poświadczenia magazynu i lokalizacje zewnętrzne z określonymi obszarami roboczymi, uniemożliwiając dostęp do tych obiektów z innych obszarów roboczych. Ta funkcja jest szczególnie przydatna, jeśli używasz obszarów roboczych do izolowania dostępu do danych użytkowników, na przykład jeśli masz oddzielne obszary robocze produkcyjne i programistyczne lub dedykowany obszar roboczy do obsługi poufnych danych.

Aby uzyskać więcej informacji, zobacz (Opcjonalnie) Przypisywanie lokalizacji zewnętrznej do określonych obszarów roboczych i (opcjonalnie) Przypisywanie poświadczeń magazynu do określonych obszarów roboczych.

Foldery Git są ogólnie dostępne

22 maja 2024 r.

Foldery Git są teraz ogólnie dostępne. Zobacz Integracja z usługą Git dla folderów Git usługi Databricks. Jeśli jesteś użytkownikiem poprzedniej funkcji "Repos", zobacz Co się stało z repozytoriami usługi Databricks?.

Wstępnie wytrenowane modele w wykazie aparatu Unity (publiczna wersja zapoznawcza)

21 maja 2024 r.

Usługa Databricks obejmuje teraz wybór wstępnie wytrenowanych modeli GenAI wysokiej jakości w wykazie aparatu Unity. Te wstępnie wytrenowane modele umożliwiają dostęp do najnowocześniejszych funkcji sztucznej inteligencji dla przepływów pracy wnioskowania, co pozwala zaoszczędzić czas i wydatki na tworzenie własnych modeli niestandardowych. Zobacz Wstępnie wytrenowane modele w wykazie aparatu Unity i witrynie Marketplace.

Wyszukiwanie wektorów mozaiki sztucznej inteligencji to ogólna dostępność

21 maja 2024 r.

Wyszukiwanie wektorów mozaiki sztucznej inteligencji jest teraz ogólnie dostępne. Zobacz Mozaikowe wyszukiwanie wektorów sztucznej inteligencji.

Autouzupełnianie asystenta usługi Databricks (publiczna wersja zapoznawcza)

20 maja 2024 r.

Funkcja autouzupełniania asystenta usługi Databricks udostępnia sugestie oparte na sztucznej inteligencji w czasie rzeczywistym podczas wpisywania notesów, zapytań i plików. Aby ją włączyć, przejdź do i przełącz > asystenta usługi Databricks. Aby uzyskać szczegółowe informacje, zobacz Autouzupełnianie oparte na sztucznej inteligencji.

Obsługa meta llama 3 w trenowaniu modelu Foundation

20 maja 2024 r.

Usługa Foundation Model Training obsługuje teraz meta llama 3. Zobacz Dostosowywanie modelu podstawowego.

Nowe zmiany w interfejsie użytkownika folderu Git

17 maja 2024 r.

Możesz zauważyć pewne zmiany w interfejsie użytkownika na potrzeby interakcji z folderami Git. Dodaliśmy następujące elementy:

• Po udostępnieniu folderu Git zostanie wyświetlony nowy alert na banerze z monitem o skopiowanie linku w celu utworzenia folderu Git. Po kliknięciu przycisku adres URL jest kopiowany do lokalnego schowka, który można wysłać do innego użytkownika. Gdy ten użytkownik adresata ładuje ten adres URL w przeglądarce, użytkownik zostanie przeniesiony do obszaru roboczego, w którym może utworzyć własny folder Git sklonowany z tego samego zdalnego repozytorium Git. Gdy adresat uzyskuje dostęp do adresu URL, w interfejsie użytkownika zostanie wyświetlone okno dialogowe Tworzenie folderu Git, które zostało wstępnie wypełnione wartościami pobranymi z folderu Git.

  

• Podobnie nowy przycisk Utwórz folder Git jest wyświetlany na nowym banerze alertu podczas wyświetlania folderu Git utworzonego przez innego użytkownika. Kliknij ten przycisk, aby utworzyć własny folder Git dla tego samego repozytorium Git na podstawie wstępnie wypełnionych wartości w oknie dialogowym Tworzenie folderu Git.

  

Trenowanie modelu foundation (publiczna wersja zapoznawcza)

13 maja 2024 r.

Usługa Databricks obsługuje teraz trenowanie modelu foundation. Korzystając z trenowania modelu foundation, możesz użyć własnych danych, aby dostosować model podstawowy w celu zoptymalizowania jego wydajności dla określonej aplikacji. Dostrajając lub kontynuując szkolenie modelu podstawowego, możesz wytrenować własny model przy użyciu znacznie mniejszej ilości danych, czasu i zasobów obliczeniowych niż trenowanie modelu od podstaw. Wszystkie dane szkoleniowe, punkty kontrolne i dostosowany model znajdują się na platformie usługi Databricks i są zintegrowane z jej narzędziami do zapewniania ładu i produktywności.

Aby uzyskać szczegółowe informacje, zobacz Dostosowywanie modelu podstawowego.

Zezwalaj użytkownikom na kopiowanie danych do schowka z tabeli wyników

9 maja 2024 r.

Administratorzy mogą teraz włączać lub wyłączać możliwość kopiowania danych do schowka z tabel wyników. Wcześniej ta funkcja była ograniczona do notesów. Teraz to ustawienie dotyczy następujących interfejsów:

• Notesy
• Pulpity nawigacyjne
• Miejsca genie
• Eksplorator wykazu
• Edytor plików
• Edytor SQL

Wartości tagów atrybutów dla obiektów wykazu aparatu Unity mogą teraz mieć długość 1000 znaków (publiczna wersja zapoznawcza)

8 maja 2024 r.

Wartości tagów atrybutów w wykazie aparatu Unity mogą teraz zawierać maksymalnie 1000 znaków. Limit znaków dla kluczy tagów pozostaje 255. Zobacz Stosowanie tagów do zabezpieczanych obiektów wykazu aparatu Unity.

Strona Nowe podglądy

8 maja 2024 r.

Włącz dostęp do wersji zapoznawczych usługi Databricks i zarządzaj nim na nowej stronie Podglądy. Zobacz Zarządzanie wersjami zapoznawcza usługi Azure Databricks.

Nowe możliwości wyszukiwania wektorów mozaiki sztucznej inteligencji

8 maja 2024 r.

Nowe możliwości obejmują następujące funkcje:

• Listy dostępu do adresów IP są teraz obsługiwane.
• Klucze zarządzane przez klienta (CMK) są teraz obsługiwane w punktach końcowych utworzonych 8 maja 2024 r. Obsługa wyszukiwania wektorowego dla klucza zarządzanego przez klienta jest dostępna w publicznej wersji zapoznawczej.
• Ulepszone dzienniki inspekcji i śledzenie autorstwa kosztów. Zobacz Dokumentację dziennika diagnostycznego.
• Teraz możesz zapisać wygenerowane osadzanie jako tabelę delty. Zobacz Tworzenie indeksu wyszukiwania wektorowego.

Zobacz Mozaikowe wyszukiwanie wektorów sztucznej inteligencji.

Przekazywanie poświadczeń i kontrole dostępu do tabel magazynu metadanych Hive są przestarzałe

7 maja 2024 r.

Przekazywanie poświadczeń i kontrole dostępu do tabel magazynu metadanych Hive są przestarzałe w środowisku Databricks Runtime 15.0 i obsługa zostanie usunięta w nadchodzącej wersji DBR.

Uaktualnij do wykazu aparatu Unity, aby uprościć zabezpieczenia i nadzór nad danymi, zapewniając centralne miejsce do administrowania dostępem do danych i inspekcji ich w wielu obszarach roboczych na twoim koncie. Sprawdź temat Co to jest wykaz Unity?.

Sterownik JDBC usługi Databricks 2.6.38

6 maja 2024 r.

Wydaliśmy wersję 2.6.38 sterownika JDBC usługi Databricks (pobierz). W tej wersji dodano następujące nowe funkcje i ulepszenia:

• Natywna obsługa zapytań sparametryzowanych, jeśli na serwerze jest używany program SPARK_CLI_SERVICE_PROTOCOL_V8. Limit liczby parametrów w zapytaniu jest 256 w trybie natywnym zapytania.
• Pozyskiwanie danych przy użyciu obsługi woluminu Unity Catalog . Zobacz więcej na temat Unity Catalog woluminów w temacie Łączenie z magazynem obiektów w chmurze przy użyciu wykazu aparatu Unity. Aby użyć tej opcji, ustaw wartość UseNativeQuery1.
• QueryProfile interfejs dodany w celu IHadoopStatement umożliwia aplikacjom pobieranie zapytania query id. Element query id może służyć do pobierania metadanych zapytania przy użyciu interfejsów API REST usługi Databricks.
• Operacje asynchroniczne dla metadanych Thrift wywołuje, jeśli serwer używa elementu SPARK_CLI_SERVICE_PROTOCOL_V9. Aby użyć tej funkcji, ustaw EnableAsyncModeForMetadataOperation właściwość na 1.
• Obsługa asercji JWT. Łącznik obsługuje teraz protokół OAuth asercji JWT przy użyciu poświadczeń klienta. W tym celu ustaw UseJWTAssertion właściwość na 1.

Ta wersja rozwiązuje również następujące problemy:

• Aktualizacje bibliotek Jacksona. Łącznik używa teraz następujących bibliotek dla analizatora Jackson JSON: jackson-annotations 2.16.0 (wcześniej 2.15.2), jackson-core 2.16.0 (wcześniej 2.15.2), jackson-databind-2.16.0 (wcześniej 2.15.2)
• Łącznik zawiera nienadane pliki klas w katalogu META-INF.

Obsługa zapory dla konta magazynu obszaru roboczego — ogólna dostępność

6 maja 2024 r.

Podczas tworzenia nowego obszaru roboczego usługi Azure Databricks konto usługi Azure Storage jest tworzone w zarządzanej grupie zasobów znanej jako konto magazynu obszaru roboczego. Teraz możesz włączyć zaporę, aby ograniczyć dostęp do konta magazynu obszaru roboczego tylko z autoryzowanych zasobów i sieci. Zobacz Włączanie obsługi zapory dla konta magazynu obszaru roboczego.

Databricks Runtime 15.2 (wersja beta)

2 maja 2024 r.

Środowiska Databricks Runtime 15.2 i Databricks Runtime 15.2 ML są teraz dostępne jako wersje beta.

Zobacz Databricks Runtime 15.2 (EoS) i Databricks Runtime 15.2 for Machine Learning (EoS).

Notesy wykrywają teraz i autouzupełnianie nazw kolumn dla ramek danych programu Spark Connect

1 maja 2024 r.

Notesy usługi Databricks teraz automatycznie wykrywają i wyświetlają nazwy kolumn w ramkach danych programu Spark Connect i umożliwiają automatyczne uzupełnianie do wybierania kolumn.