Sierpień 2024 r.

Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w sierpniu 2024 r.

Uwaga

Wydania są etapowe. Twoje konto usługi Azure Databricks może nie zostać zaktualizowane do tygodnia lub więcej po początkowej dacie wydania.

Monitoruj użycie obiektów w Unity Catalog pod kątem przydziałów przy użyciu nowych interfejsów API ograniczeń zasobów.

30 sierpnia 2024 r.

Nowe interfejsy API limitów przydziałów zasobów umożliwiają monitorowanie użycia zabezpieczanych obiektów wykazu aparatu Unity względem przydziałów zasobów. Wkrótce będzie również można otrzymywać powiadomienia e-mail, gdy zbliżasz się do limitów przydziałów. Zobacz , jak monitorować swoje użycie limitów zasobów katalogu Unity oraz odniesienie do interfejsu API limitów zasobów .

MPT 7B Poinstruowanie i MPT 30B Poinstruowanie wycofania modelu

30 sierpnia 2024 r.

Modele MPT 7B Poinstruuj i MPT 30B Poinstruuj są teraz wycofane. Zobacz Wycofane modele , aby zapoznać się z zalecanymi modelami zastępczymi.

AskSupport zastąpiony przez asystenta usługi Azure Databricks

29 sierpnia 2024 r.

AskSupport, kanał pomocy technicznej oparty na usłudze Slack usługi Databricks, został zastąpiony usługą Databricks Assistant, która jest dostępna w obszarze roboczym usługi Databricks. Użyj Asystenta Databricks, aby wyszukać dokumentację techniczną, utworzyć zgłoszenia i uzyskać pomoc dostosowaną do kontekstu.

Aby korzystać z Asystenta sztucznej inteligencji, asystent sztucznej inteligencji musi być włączony w konsoli konta.

Pulpit nawigacyjny zarządzania kosztami dostępnymi do zaimportowania dodany do konsoli konta (publiczna wersja zapoznawcza)

28 sierpnia 2024 r.

Administratorzy konta mogą teraz zaimportować spersonalizowany dashboard zarządzania kosztami z konsoli konta do dowolnego obszaru roboczego w katalogu Unity na swoim koncie. Istnieją dwie wersje pulpitu nawigacyjnego: jeden, który monitoruje użycie całego konta, a drugi do użycia w jednym obszarze roboczym.

Tabele systemowe lakeflow poszerzono o dodatkowe kolumny

23 sierpnia 2024 r.

Tabele w schemacie system.lakeflow są rozszerzane o dodatkowe kolumny. Wprowadzono następujące zmiany:

• jobs jest rozszerzona o kolumnę description.
• job_run_timeline jest rozszerzona o kolumny run_type, run_name, compute_ids, termination_code i job_parameters.
• job_task_run_timeline jest rozszerzana o kolumny job_run_id, parent_run_id i termination_code.

Zmiana schematu nie jest przerywająca i nie zakłóci istniejących przepływów pracy. Nowe kolumny nie zostaną wypełnione dla już emitowanych wierszy. Aby uzyskać więcej informacji, zobacz Jobs system table reference.

Wyróżnianie błędów formatowania kodu w języku Python

23 sierpnia 2024 r.

Kod języka Python w notesach i edytorach plików może wyróżniać błędy formatowania i ostrzeżenia, takie jak nieoczekiwane wcięcie, długość długiej linii i inne. Zobacz Wyróżnianie formatowania języka Python.

Udostępnianie różnicowe: więcej funkcji usługi Delta Lake jest teraz obsługiwanych przez łączniki języka Python i usługi Power BI

21 sierpnia 2024 r.

Program Delta Sharing Python Connector 1.1.0+ i Power BI w wersji 2.132.908.0 lub nowszej obsługują teraz:

• Tryb mapowania kolumn
• Wektory usuwania
• Jednolity format

Te funkcje usługi Delta Lake były już obsługiwane w środowisku Databricks Runtime 14.1 lub nowszym oraz w łączniku Apache Spark sharing typu open source 3.1 lub nowszym.

Zobacz Macierz obsługi funkcji usługi Delta Lake.

Udostępnianie różnicowe dodaje obsługę funkcji TimestampNTZ

21 sierpnia 2024 r.

Udostępnianie różnicowe dodaje obsługę funkcji TimestampNTZ w środowisku Databricks Runtime 14.1 i nowszym oraz łączniku Apache Spark sharing typu open source w wersji 3.3 lub nowszej.

Zobacz Macierz obsługi funkcji usługi Delta Lake.

Zadanie Zadania usługi Azure Databricks For each to ogólna dostępność

21 sierpnia 2024 r.

Zadanie For each jest teraz ogólnie dostępne. Za pomocą zadania For each można uruchomić inne zadanie w pętli, przekazując inny zestaw parametrów do każdej iteracji zadania. Zadanie For each może wykonać iterację dowolnego z standardowych zadań podrzędnych, takich jak notes, plik JAR, skrypt języka Python lub zadanie SQL. Zobacz Uruchamianie sparametryzowanego zadania zadania usługi Azure Databricks w pętli.

Uprawnienie RBAC platformy Azure dla administratorów obszaru roboczego

20 sierpnia 2024 r.

Wcześniej, do przyznania użytkownikowi roli administratora obszaru roboczego Azure Databricks z platformy Azure, wymagana była rola współtwórcy lub właściciela (kontrola dostępu oparta na rolach Azure). Teraz możesz utworzyć niestandardową rolę RBAC platformy Azure, która ma uprawnienia Microsoft.Databricks/workspaces/assignWorkspaceAdmin/action przyznać użytkownikowi rolę administratora obszaru roboczego usługi Azure Databricks. Ci użytkownicy mogą zarządzać usługą Azure Databricks i konfigurować rejestrowanie diagnostyczne. Aby uzyskać więcej informacji, zobacz Wymagane uprawnienia administratora platformy Azure.

Databricks Runtime 15.4 LTS to ogólna dostępność

19 sierpnia 2024 r.

Środowisko Databricks Runtime 15.4 LTS i Databricks Runtime 15.4 LTS ML są teraz ogólnie dostępne.

Zobacz Databricks Runtime 15.4 LTS and Databricks Runtime 15.4 LTS for Machine Learning (Środowisko Databricks Runtime 15.4 LTS i Databricks Runtime 15.4 LTS).

Autouzupełnianie spersonalizowanego notesu

19 sierpnia 2024 r.

Automatyczne uzupełnianie notesu teraz priorytetyzuje sugestie na podstawie poszczególnych metadanych i użycia katalogu Unity, dostarczając niestandardowych rankingów sugestii dla każdego użytkownika. Zobacz Personalizowane autouzupełnianie

Symlinki są teraz obsługiwane w plikach obszaru roboczego

18 sierpnia 2024 r.

Użytkownicy mogą teraz tworzyć dowiązania symboliczne w terminalu webowym i komórkach notesu. Jeśli zatrzymasz wskaźnik myszy na symlinku, etykietka narzędzia zostanie wyświetlona ze ścieżką bazową i opcją kopiowania ścieżki. Wszystkie obiekty docelowe muszą znajdować się w katalogu /Workspace.

Konfigurowanie domyślnego trybu dostępu obszaru roboczego dla obliczeń zadań

16 sierpnia 2024 r.

Administratorzy obszaru roboczego mogą teraz skonfigurować domyślny tryb dostępu dla zadań obliczeniowych w ich obszarze roboczym. Ten domyślny tryb dostępu jest stosowany do zasobów obliczeniowych bez zdefiniowanego trybu dostępu. Aby uzyskać więcej informacji, zobacz Domyślny tryb dostępu dla obliczeń zadań.

Nowe polecenia ukośnika dla asystenta usługi Databricks

14 sierpnia 2024 r.

Asystent usługi Databricks dodał następujące polecenia ukośnika jako skróty do typowych zadań:

• /findTables: Wyszukuje odpowiednie tabele na podstawie metadanych Unity Catalog.
• /findQueries: Wyszukuje odpowiednie zapytania na podstawie metadanych Unity Catalog.
• /prettify: formatuje kod pod kątem czytelności.
• /rename: Sugeruje zaktualizowane nazwy komórek notesu i innych elementów w zależności od kontekstu.
• /settings: dostosowuje ustawienia notesu bezpośrednio z Poziomu Asystenta.

Aby uzyskać więcej informacji, zobacz Use slash commands for prompts (Używanie poleceń ukośnika dla wierszy).

Wyszukiwanie obszaru roboczego obsługuje teraz woluminy

14 sierpnia 2024 r.

Woluminy są teraz uwzględniane w wynikach wyszukiwania. Zobacz Wyszukiwanie obiektów obszaru roboczego.

Modele Meta Llama 3.1 405B obsługiwane w programie Foundation Model Fine-tuning

14 sierpnia 2024 r.

Modele Meta Llama 3.1 405B są teraz obsługiwane w programie Foundation Model Fine-tuning. Zobacz Obsługiwane modele.

Sterownik JDBC usługi Databricks 2.6.40

13 sierpnia 2024 r.

Sterownik JDBC usługi Databricks w wersji 2.6.40 jest teraz dostępny z pobierania sterownika JDBC. Ta wersja usuwa nadmiarowe WARNING komunikaty dziennika, aby zwiększyć użyteczność i bezpieczeństwo rejestrowania.

Ta wersja zawiera następujące ulepszenia i nowe funkcje:

• Obsługa punktu końcowego odnajdywania OIDC. Sterownik może teraz ustawić punkt końcowy odnajdywania OIDC, aby uzyskać token i otrzymać punkt końcowy autoryzacji.
• Zaktualizowano obsługę strzałki. Sterownik używa teraz narzędzia Apache Arrow w wersji 14.0.2. Starsze wersje sterownika używały narzędzia Apache Arrow w wersji 9.0.0.
• ProxyIgnoreList wsparcie. Sterownik obsługuje teraz właściwość ProxyIgnoreList, gdy UseProxy jest ustawiona na wartość 1.
• Obsługa tokenu odświeżania. Sterownik obsługuje teraz opcjonalny token odświeżania. Zapisuje token dostępu i ponownie używa go dla nowych połączeń, o ile jest on prawidłowy. Jeśli sterownik nie może odnowić tokenu dostępu przy użyciu tokenu odświeżania, zaloguje się ponownie.
• Zaktualizowano obsługę uwierzytelniania. Sterownik obsługuje teraz uwierzytelnianie oparte na przeglądarce (U2M) i poświadczenia klienta (M2M) w usłudze Google Cloud.
• Dodano ujednolicone domyślne opcje protokołu OAuth.
• Teraz można skonfigurować port przekierowania OAuth. Aby to zrobić, przypisz właściwość OAuth2RedirectUrlPort do swojego portu.

Aby uzyskać pełne informacje o konfiguracji, zobacz Przewodnik sterowników JDBC usługi Databricks zainstalowany wraz z pakietem pobierania sterownika.

Osobiste tokeny dostępu usługi Databricks odwołane, jeśli nie są używane po upływie 90 dni

13 sierpnia 2024 r.

Usługa Databricks automatycznie odwołuje wszystkie osobiste tokeny dostępu (PAT), które nie były używane w ciągu 90 lub więcej dni. Aby uzyskać więcej informacji, zobacz Monitor i odwołaj osobiste tokeny dostępu.

Interfejs API klastrów obsługuje teraz częściowe aktualizacje konfiguracji

13 sierpnia 2024 r.

Nowe wywołanie interfejsu API umożliwia częściową aktualizację konfiguracji klastra, co wymaga określenia tylko atrybutów, które chcesz zaktualizować. Zobacz sekcję Aktualizacja konfiguracji klastra (częściowa) w dokumentacji interfejsu API REST.

Zawijanie wierszy w komórkach notesu

12 sierpnia 2024 r.

Teraz można włączyć lub wyłączyć zawijanie wierszy w komórkach notesu, umożliwiając zawijanie tekstu na wiele wierszy lub pozostanie w jednym wierszu z przewijaniem poziomym. Zobacz Zawijanie linii.

Określ kolumny do synchronizacji dla wyszukiwania wektorowego Mosaic AI

12 sierpnia 2024 r.

Teraz można określić podzbiór kolumn w tabeli do użycia w indeksie wyszukiwania wektorowego. Kolumna klucza podstawowego i kolumna osadzania są zawsze synchronizowane. Zobacz How to create and query a vector search index (Jak utworzyć i wysłać zapytanie do indeksu wyszukiwania wektorowego).

Pliki nie mogą już mieć identycznych nazw w folderach obszaru roboczego

9 sierpnia 2024 r.

Usługa Databricks uniemożliwia teraz tworzenie lub zmienianie nazw zasobów w folderach obszaru roboczego, gdy nazwa elementu zawartości jest dokładnie zgodna z nazwą innego pliku, co odpowiada rozszerzeniu pliku zasobu. Na przykład nie można utworzyć pliku o nazwie test.py , jeśli istnieje już notes o nazwie podstawowej test o rozszerzeniu .py w tym samym folderze obszaru roboczego.

Aby uzyskać więcej informacji, zobacz Nazewnictwo zasobów w folderach obszarów roboczych.

Wymuszanie zasad obliczeniowych jest teraz dostępne

8 sierpnia 2024 r.

Wymuszanie zgodności zasad umożliwia administratorom obszarów roboczych aktualizowanie zasobów obliczeniowych obszaru roboczego w celu zachowania zgodności z najnowszą wersją zasad. Tej funkcji można używać w interfejsie użytkownika lub za pośrednictwem interfejsu API zasad klastra.

Zobacz Wymuszanie zgodności zasad lub Interfejs API zasad klastra.

Interfejsy API modelu foundation — płatność za token jest teraz ogólnie dostępna

7 sierpnia 2024 r.

Interfejsy API modelu foundation — płatność za token jest teraz ogólnie dostępna. Zobacz Interfejsy API modelu Modelu modelu płatności za token na token.

Bezpieczna i prywatna współpraca nad projektami danych przy użyciu funkcji Clean Rooms usługi Databricks (publiczna wersja zapoznawcza)

6 sierpnia 2024 r.

Usługa Databricks Clean Rooms używa funkcji delta sharing i bezserwerowych zasobów obliczeniowych w celu zapewnienia bezpiecznego i ochrony prywatności środowiska, w którym wiele firm może udostępniać poufne dane przedsiębiorstwa i współpracować bez bezpośredniego dostępu do danych.

Dzięki funkcji Clean Rooms użytkownicy z innych kont usługi Databricks mogą współpracować w celu generowania unikatowych szczegółowych informacji na temat udostępnionych projektów, takich jak kampanie reklamowe, decyzje inwestycyjne lub badania i rozwój, bez przenoszenia lub ujawniania poufnych danych. Uruchamianie złożonych obciążeń w środowisku efemerycznym przy użyciu dowolnego języka obsługiwanego przez notesy usługi Databricks, w tym języka Python, który zapewnia natywną obsługę obciążeń uczenia maszynowego.

Aby wypróbować tę aplikację, skontaktuj się z przedstawicielem usługi Azure Databricks.

Zobacz Co to jest usługa Azure Databricks Clean Rooms?.

Wyszukiwanie wektorów mozaiki sztucznej inteligencji jest teraz zgodne ze standardem HIPAA

6 sierpnia 2024 r.

Wyszukiwanie wektorów mozaiki sztucznej inteligencji jest teraz zgodne ze standardem HIPAA we wszystkich regionach.

Formatowanie kolumn w notesie i tabelach wyników zapytań

6 sierpnia 2024 r.

Dostosuj tabele wyników, aby być bardziej czytelne przy użyciu opcji formatowania kolumn, takich jak Waluta, Procent, adres URL, kontrola nad miejscami dziesiętnymi i nie tylko. Zobacz Format kolumn.

Filtry wierszy i maski kolumn są teraz ogólnie dostępne, z ulepszeniami

6 sierpnia 2024 r.

Możliwość stosowania filtrów wierszy i masek kolumn do tabel jest teraz ogólnie dostępna w środowisku Databricks Runtime 12.2 lub nowszym. Filtry wierszy i maski kolum uniemożliwiają dostęp do poufnych danych przez określonych użytkowników. Te filtry i maski są implementowane jako funkcje zdefiniowane przez użytkownika SQL (UDF). Ogólna dostępność zapewnia obsługę następujących funkcji, które nie były dostępne w publicznej wersji zapoznawczej:

• Wyrażenia stałe w parametrach polityki (ciągi znaków, wartości liczbowe, przedziały, wartości logiczne, wartości null).

• Zmaterializowane widoki i tabele przesyłania strumieniowego (wersja zapoznawcza [publiczna]).

• Instrukcje MERGE.

• Próbkowanie tabeli.

Oddzielna wersja obsługi szczegółowej kontroli dostępu w przypadku obliczeń pojedynczego użytkownika rozszerza również opcje obliczeniowe do pracy w tabelach z zastosowanymi filtrami wierszy i maskami kolumn.

Zobacz Filtrowanie poufnych danych tabeli przy użyciu filtrów wierszy i masek kolumn.

Federacja lakehouse jest ogólnie dostępna (GA)

1 sierpnia 2024 r.

W usługach Databricks Runtime 15.2 i nowszych oraz Databricks SQL w wersji 2024.30 i nowszych łączniki federacyjne usługi Lakehouse w następujących typach baz danych są ogólnie dostępne (OGÓLNA dostępność):

• MySQL
• PostgreSQL
• Amazon Redshift
• Snowflake
• Microsoft SQL Server
• Azure Synapse (SQL Data Warehouse)
• Databricks

W tej wersji wprowadzono również następujące ulepszenia:

• Obsługa uwierzytelniania logowania jednokrotnego (SSO) w łącznikach snowflake i Microsoft SQL Server .

• Obsługa usługi Azure Private Link dla łącznika programu SQL Server z bezserwerowych środowisk obliczeniowych. Zobacz Krok 3. Tworzenie reguł prywatnego punktu końcowego.

• Obsługa dodatkowych wypychania (ciąg, matematyka i różne funkcje).

• Ulepszony współczynnik powodzenia wypychania w różnych kształtach zapytań.

• Dodatkowe możliwości debugowania wypychania:

  • W EXPLAIN FORMATTED danych wyjściowych zostanie wyświetlony tekst zapytania wypchniętego.
  • Interfejs użytkownika profilu zapytania wyświetla tekst zapytania wypychanego, identyfikatory węzłów federacyjnych i czas wykonywania zapytań JDBC (w trybie pełnym). Zobacz Wyświetlanie zapytań federacyjnych generowanych przez system.