Grudzień 2024 r.
Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w grudniu 2024 r.
Notatka
Wydania są etapowe. Twoje konto usługi Azure Databricks może nie zostać zaktualizowane do tygodnia lub więcej po początkowej dacie wydania.
Databricks Runtime 16.1 to wersja generalnie dostępna
20 grudnia 2024 r.
Środowiska Databricks Runtime 16.1 i Databricks Runtime 16.1 ML są już powszechnie dostępne.
Zobacz Databricks Runtime 16.1 i Databricks Runtime 16.1 dla uczenia maszynowego.
Domyślny format nowych notesów to teraz format IPYNB (Jupyter)
20 grudnia 2024 r.
Domyślny format nowych notesów tworzonych w obszarze roboczym usługi Azure Databricks to teraz IPYNB (.ipynb). Wcześniej domyślny format notesów był Source (.py, .sql, .scala, .r). Aby zmienić format domyślny, użyj ustawienia Domyślny format pliku dla notesów w okienku Programisty w ustawieniach użytkownika obszaru roboczego. Zobacz Formaty notesów.
Modele hostowane przez Databricks dla narzędzia Databricks Assistant są dostępne w publicznej wersji zapoznawczej.
19 grudnia 2024
Teraz możesz używać modeli hostowanych w usłudze Azure Databricks do zasilania asystenta usługi Databricks w usłudze Azure Databricks. Ta funkcja jest dostępna w publicznej wersji zapoznawczej.
Zobacz Użyj modelu hostowanego przez Databricks dla asystenta Databricks.
Funkcja wykonawcza kodu języka Python dla agentów sztucznej inteligencji (publiczna wersja zapoznawcza)
19 grudnia 2024
Teraz możesz szybko dać agentom sztucznej inteligencji możliwość uruchamiania kodu w języku Python. Usługa Databricks oferuje teraz wstępnie zbudowaną funkcję Unity Catalog, która może być używana przez agenta AI jako narzędzie do rozszerzania jego możliwości poza generowanie języka.
Zobacz Tworzenie niestandardowych narzędzi agenta sztucznej inteligencji za pomocą funkcji Katalogu Unity.
databricks-agents SDK 0.13.0 wydanie
18 grudnia 2024 r.
Wersja 0.13.0 zestawu databricks-agents SDK została wydana naPyPI, zawierająca następujące zmiany:
- Respektuj bieżący aktywny profil CLI Databricks i identyfikator URI rejestru modeli MLflow podczas korzystania z API
agents.deploy()i innych APIdatabricks.agents. W szczególności można teraz określić kombinacjęDATABRICKS_CONFIG_PROFILE=my-profileiMLFLOW_REGISTRY_URI=databricks-uc://my-profileprzed wywołaniemagents.deploy()w celu określenia profilu interfejsu wiersza polecenia usługi Databricks do użycia do wdrażania agentów i uzyskiwania do nich dostępu. - W
mlflow.evaluate()uruchamiaj wskaźniki pobierania i wytycznych tylko wtedy, gdy odpowiednio istnieją konteksty pobierania i wytycznych. - Dodaj uwierzytelnianie oparte na tajnych danych do klientów dla
mlflow.evaluate().
Grupy zewnętrzne są teraz oznaczone etykietami i niezmienne
18 grudnia 2024 r.
Grupy zewnętrzne to grupy utworzone w usłudze Azure Databricks na podstawie identyfikatora Entra firmy Microsoft. Te grupy są tworzone przy użyciu łącznika aprowizacji SCIM i pozostają zsynchronizowane z identyfikatorem Entra firmy Microsoft. Grupy zewnętrzne są teraz jawnie oznaczone jako External i nie można ich już aktualizować z poziomu konsoli konta usługi Azure Databricks lub strony ustawień administratora obszaru roboczego domyślnie. Aby zaktualizować członkostwo w grupie zewnętrznej z poziomu interfejsu użytkownika usługi Azure Databricks, administrator konta może wyłączyć niezmienne grupy zewnętrzne na stronie wersji zapoznawczej konsoli konta.
Zobacz Typy grup w usłudze Azure Databricks.
vector_search obsługuje teraz wektorowe osadzanie danych wejściowych
17 grudnia 2024 r.
Funkcja sztucznej inteligencji vector_search obsługuje teraz wektorowe osadzanie danych wejściowych. Teraz możesz użyć parametrów query_text lub query_vector, aby wyszukać określone osadzanie tekstu lub wektora w indeksach wektorowych. Zobacz funkcję wyszukiwania wektora .
Określanie formatów odpowiedzi dla ai_query
17 grudnia 2024 r.
ai_query teraz obsługuje pole responseFormat dla danych wyjściowych ze strukturą. Użyj responseFormat w żądaniach ai_query, aby określić format odpowiedzi, który ma być przestrzegany przez model. Zobacz ai_query function.
Testuj czyste pomieszczenia ze współpracownikami w tym samym magazynie metadanych
17 grudnia 2024 r.
Teraz możesz przetestować swój clean room przed pełnym wdrożeniem, dodając współpracownika z tego samego metastore. Zobacz Tworzenie czystych pomieszczeń.
Przypisywanie zasobów obliczeniowych do grup (publiczna wersja zapoznawcza)
17 grudnia 2024 r.
Nowy dedykowany tryb dostępu (wcześniej tryb użytkownika pojedynczego) pozwala na przypisanie dedykowanych zasobów obliczeniowych ogólnego przeznaczenia grupie lub pojedynczemu użytkownikowi. Zobacz Przypisywanie zasobów obliczeniowych do grupy.
Ta publiczna wersja zapoznawcza zapewnia również dostęp do nowego, uproszczonego interfejsu użytkownika dla obliczeń. Zobacz Użyj prostego formularza do zarządzania obliczeniami.
Administrator obszaru roboczego musi włączyć tę wersję zapoznawczą. Zobacz Zarządzanie podglądami usługi Azure Databricks.
Delegowanie możliwości tworzenia poświadczeń magazynu w wykazie aparatu Unity do jednostki usługi
17 grudnia 2024 r.
Teraz możesz przyznać zasadom usług uprawnienia do tworzenia referencji magazynowej w Unity Catalog za pomocą uprawnienia CREATE STORAGE CREDENTIAL. Zobacz CREATE STORAGE CREDENTIAL.
Wydano wersję 2.2 interfejsu API zadań
16 grudnia 2024 r.
Wersja interfejsu API zadań jest aktualizowana z wersji 2.1 do 2.2. Aktualizacje w wersji 2.2 interfejsu API zadań obejmują domyślne wstawianie w kolejkę nowych lub zaktualizowanych zadań oraz ulepszanie mechanizmu stronicowania odpowiedzi zadań i uruchamiania zadań, które zawierają pola z wieloma wartościami. Aby dowiedzieć się więcej o aktualizacjach w tej wersji, sprawdź Aktualizowanie interfejsu API Jobs z wersji 2.1 do 2.2. Aby zapoznać się z pełną dokumentacją interfejsu API zadań 2.2, zobacz Jobs (najnowsza wersja). Mimo że usługa Databricks zaleca korzystanie z wersji 2.2 interfejsu API zadań, nadal można uzyskać dostęp do wersji 2.1 i 2.0. Zobacz Zadania (2.1) i API zadań 2.0.
Uprawnienia MANAGE katalogu Unity (wersja preview publiczna)
14 grudnia 2024 r.
Teraz możesz przyznać użytkownikom przywilej MANAGE na zabezpieczalnych obiektach Unity Catalog. Uprawnienie MANAGE umożliwia użytkownikom wykonywanie kluczowych działań na obiekcie Unity Catalog, w tym:
- Zarządzanie uprawnieniami
- Upuszczanie obiektu
- Zmiana nazwy obiektu
- Przenoszenie własności
Zobacz MANAGE.
Meta Llama 3.3 jest już dostępna dla obciążeń zapewniających przepustowość
13 grudnia 2024 r.
Meta Llama 3.3, architektura modelu stworzona i wytrenowana przez firmę Meta, jest teraz dostępna do obsługi w interfejsach API modelu Foundation z zapewnioną przepustowością.
Wyświetlanie metryk obciążenia streamingu dla przebiegów zadań (wersja poglądowa)
** 12 grudnia 2024 r. **
Podczas wyświetlania przebiegów zadań w interfejsie użytkownika Databricks Jobs można teraz przeglądać takie metryki jak zaległości w sekundach, bajtach, rekordach i plikach dla źródeł obsługiwanych przez przesyłanie strumieniowe ze strukturą Spark, w tym Apache Kafka, Amazon Kinesis i Auto Loader. Zobacz Wyświetl metryki dla zadań przesyłania strumieniowego.
Wyświetlanie metryk obciążenia streamingowego dla aktualizacji pipeline'u Delta Live Tables (wersja zapoznawcza)
** 12 grudnia 2024 r. **
Podczas wyświetlania aktualizacji potoku w interfejsie użytkownika Delta Live Tables można teraz wyświetlać metryki, takie jak zaległości w sekundach, bajtach, rekordach i plikach dla każdego przepływu strumieniowego w potoku. Metryki przesyłania strumieniowego są obsługiwane dla źródeł Spark Structured Streaming, w tym Apache Kafka, Amazon Kinesis i Auto Loader. Zobacz Wyświetl metryki przesyłania strumieniowego.
Lakehouse Federation obsługuje Oracle (publiczna wersja zapoznawcza)
12 grudnia 2024 r.
Teraz można uruchamiać zapytania federacyjne dotyczące danych zarządzanych przez firmę Oracle. Zobacz Uruchamianie zapytań federacyjnych w usłudze Oracle.
Databricks Runtime 16.1 (wersja beta)
11 grudnia 2024 r.
Środowiska Databricks Runtime 16.1 i Databricks Runtime 16.1 ML są teraz dostępne jako wersje beta.
Zobacz Databricks Runtime 16.1 i Databricks Runtime 16.1 dla uczenia maszynowego
Zarządzanie bezserwerowymi połączeniami sieciowymi wychodzącymi za pomocą bezserwerowej kontroli ruchu wychodzącego
11 grudnia 2024
Kontrolka ruchu wychodzącego bezserwerowego umożliwia ograniczenie dostępu wychodzącego do określonych miejsc docelowych w Internecie. Zobacz Co to jest kontrola ruchu wychodzącego w środowisku bezserwerowym?.
Tabela systemu zdarzeń dostępu do sieci jest teraz dostępna (publiczna wersja zapoznawcza)
11 grudnia 2024 r.
Tabele systemowe usługi Azure Databricks zawierają teraz tabelę dostępu do sieci. Ta tabela rejestruje zdarzenie za każdym razem, gdy dostęp do Internetu zostanie odrzucony z twojego konta. Aby uzyskać dostęp do tabeli, administratorzy muszą mieć włączony schemat systemu access. Zobacz Tabela systemu zdarzeń dostępu do sieci.
Monitorowanie i odwoływanie osobistych tokenów dostępu na koncie (prywatna wersja zapoznawcza)
11 grudnia 2024 r.
Administratorzy kont mogą teraz wyświetlać raport dotyczący tokenów, aby monitorować i odwoływać osobiste tokeny dostępu (PATs) w konsoli konta. Usługa Databricks zaleca używanie tokenów dostępu OAuth zamiast paT w celu zwiększenia bezpieczeństwa i wygody. Aby dołączyć do tej wersji zapoznawczej, skontaktuj się z zespołem ds. kont usługi Azure Databricks. Zobacz Monitorowanie i odwoływanie osobistych tokenów dostępu na koncie.
Katalog Unity może połączyć się z magazynami metadanych Hive
11 grudnia 2024 r.
Teraz możesz użyć Unity Catalog, aby uzyskać dostęp do danych zarejestrowanych w metastore Hive i nimi zarządzać. Obejmuje to zarówno zarządzane zewnętrznie magazyny metadanych Hive, jak i starsze wewnętrzne magazyny metadanych Hive w usłudze Databricks.
Usuwanie magazynu metadanych w celu wymuszania izolacji magazynu na poziomie wykazu
11 grudnia 2024 r.
Jeśli masz magazyn na poziomie magazynu metadanych dla zarządzanych tabel i woluminów (znany również jako katalog główny magazynu metadanych), ale chcesz wymusić izolację magazynu danych na poziomie wykazu lub schematu, możesz teraz usunąć ten magazyn na poziomie magazynu metadanych bez przerywania istniejących obciążeń. Zobacz Usuwanie magazynu metadanych.
Meta Llama 3.3 70B Instruct jest teraz dostępny w serwisie obsługi modeli
11 grudnia 2024 r.
Usługa Mosaic AI Model Serving obsługuje teraz Meta Llama 3.3 70B Instruct, najnowocześniejszy duży model językowy utworzony i przeszkolony przez Meta. Llama 3.3 70B Instruct jest dostępny w ramach API modelu Foundation w systemie pay-per-token. Ta dostępność obejmuje również obsługę wywołań funkcji .
Od 11 grudnia 2024 r. Meta-Llama-3.1-70B-Instruct zastępuje obsługę Meta-Llama-3-70B-Instruct w interfejsach API modelu foundation typu płatność za token.
bamboolib jest teraz przestarzały
10 grudnia 2024 r.
bamboolib jest teraz przestarzały. Użytkownicy mogą nadal uzyskiwać dostęp do biblioteki bamboolib w celu przeprowadzania analizy danych z małą ilością kodu w notesach, ale usługa Databricks nie aktywnie opracowuje ani nie obsługuje tego narzędzia. Aby uzyskać pomoc dotyczącą generowania kodu, użyj Databricks Assistant.
Usprawnij ocenę agenta sztucznej inteligencji przy użyciu syntetycznych zestawów ewaluacyjnych
9 grudnia 2024 r.
Oceń agenta sztucznej inteligencji, generując reprezentatywny zestaw oceny na podstawie dokumentów. Interfejs API generowania syntetycznego jest ściśle zintegrowany z oceną agenta, umożliwiając szybką ocenę i poprawę jakości odpowiedzi agenta bez przechodzenia przez kosztowny proces etykietowania przez człowieka. Zobacz Syntetyzowanie zestawów oceny.
Poprawa wydajności odczytu tabeli Delta Sharing między usługami Databricks dzięki udostępnianiu historii (wersja publiczna preview)
5 grudnia 2024 r.
Zwiększ wydajność udziałów tabel Databricks-to-Databricks, włączając udostępnianie historii. Zobacz Poprawianie wydajności odczytu tabeli za pomocą funkcji udostępniania historii.
Maksymalny okres istnienia osobistego tokenu dostępu wynosi teraz 730 dni (dwa lata)
5 grudnia 2024 r.
Domyślny maksymalny okres istnienia nowo utworzonych osobistych tokenów dostępu wystawionych przez usługę Databricks wynosi teraz 730 dni (dwa lata). Wcześniej można było utworzyć osobiste tokeny dostępu bez wygaśnięcia domyślnie. Dzięki tej aktualizacji użytkownicy nie mogą generować nowych tokenów z okresem istnienia przekraczającym 730 dni, a tokeny utworzone bez określonego okresu istnienia są ustawione na 730-dniowy czas trwania. Jeśli skonfigurowano maksymalny okres istnienia tokenu dla obszaru roboczego do mniej niż 730 dni, konfiguracja pozostaje niezmieniona. Zobacz Monitorowanie i cofanie osobistych tokenów dostępu oraz uwierzytelnianie za pomocą osobistych tokenów dostępu w usłudze Azure Databricks.
Trenowanie modelu mozaiki sztucznej inteligencji — prognozowanie bezserwerowe (publiczna wersja zapoznawcza)
5 grudnia 2024 r.
Trenowanie modelu AI Mosaic - prognozowanie udoskonala doświadczenie prognozowania przy użyciu AutoML dzięki zarządzanym obliczeniom bezserwerowym, obsłudze Katalogu Unity, dostępowi do algorytmów uczenia głębokiego i ulepszonemu interfejsowi. Zobacz Prognozowanie (bezserwerowe) przy użyciu rozwiązania AutoML.
Dodawanie zasad budżetu do modelowania obsługujących punkty końcowe
4 grudnia 2024 r.
zasady budżetu są teraz obsługiwane w przypadku punktów końcowych obsługujących model. Zobacz Zarządzanie modelem obsługującym punkty końcowe.