Styczeń 2024
Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w styczniu 2024 r.
Uwaga
Wydania są etapowe. Twoje konto usługi Azure Databricks może nie zostać zaktualizowane do tygodnia lub więcej po początkowej dacie wydania.
Obsługa natywnego formatu pliku XML (publiczna wersja zapoznawcza)
31 stycznia 2024 r.
Natywna obsługa formatu pliku XML jest teraz dostępna w publicznej wersji zapoznawczej. Obsługa formatu pliku XML umożliwia pozyskiwanie, wykonywanie zapytań i analizowanie danych XML na potrzeby przetwarzania wsadowego lub przesyłania strumieniowego. Może automatycznie wnioskować i rozwijać schema i typy danych, obsługuje wyrażenia SQL, takie jak from_xml
, i może generate dokumenty XML. Nie wymaga on zewnętrznych plików JAR i współpracuje bezproblemowo z usługą Auto Loader, read_files
, COPY INTO
i Delta Live Tables. Aby uzyskać więcej informacji, zobacz Odczytywanie i zapisywanie plików XML.
Udostępnianie modeli sztucznej inteligencji przy użyciu witryny Databricks Marketplace (publiczna wersja zapoznawcza)
31 stycznia 2024 r.
Teraz możesz używać witryny Marketplace do udostępniania modeli zarejestrowanych w środowisku Unity Catalog. Aby środowisko Unity Catalog uczestniczyło w udostępnianiu modeli, należy włączyć zarówno obszary robocze dostawcy, jak i konsumentów.
Zobacz Co to jest witryna Databricks Marketplace? i Dodaj modele do udziału.
Aktualizacje reguł sieciowej grupy zabezpieczeń
31 stycznia 2023 r.
Aby zwiększyć skalowalność platformy, płaszczyzna sterowania usługi Azure Databricks wymaga teraz nowych punktów końcowych dla klasycznej płaszczyzny danych do nawiązania połączenia. W przypadku obszarów roboczych wdrożonych we własnej sieci wirtualnej platformy Azure porty sieciowe 3306 i 8443-8451 są teraz dodawane do istniejącej reguły zabezpieczeń do AzureDatabricks
miejsca docelowego, wymuszając ruch wychodzący na porcie 443.
Aby uzyskać więcej informacji, zobacz Reguły sieciowej grupy zabezpieczeń.
Ścieżka obszaru roboczego update
W przeszłości użytkownicy musieli uwzględnić /Workspace
prefiks ścieżki dla niektórych interfejsów API usługi Databricks (%sh
), ale nie dla innych (%run
dane wejściowe interfejsu API REST). Teraz użytkownicy mogą udostępniać ścieżki obszaru roboczego z prefiksem /Workspace
wszędzie w usłudze Databricks. Stare odwołania do ścieżek bez prefiksu /Workspace
są przekierowywane i będą nadal działać. Usługa Databricks zaleca, aby wszystkie ścieżki obszaru roboczego używały prefiksu /Workspace
, aby odróżnić je od ścieżek woluminów i systemu plików DBFS.
Obsługa zapory usługi Azure Storage z zasobów obliczeniowych bezserwerowych jest ogólnie dostępna
30 stycznia 2024 r.
Obsługa zapory usługi Azure Storage z zasobów obliczeniowych bezserwerowych usługi Azure Databricks jest ogólnie dostępna. Możesz wymusić, że bezserwerowe magazyny SQL używają stabilnych identyfikatorów podsieci w celu nawiązania połączenia z usługą Azure Storage i listy dozwolonych tych identyfikatorów w zaporze zasobów platformy Azure. Zobacz Konfigurowanie zapory na potrzeby bezserwerowego dostępu obliczeniowego.
Usprawnione tworzenie zadań usługi Azure Databricks
29 stycznia 2024 r.
Puste zadanie jest teraz tworzone natychmiast po kliknięciu przycisku w celu utworzenia zadania, co umożliwia edytowanie ustawień na poziomie zadania, takich jak tagi, harmonogram lub ustawienia powiadomień przed dodaniem pierwszego zadania. Wcześniej trzeba było utworzyć pierwsze zadanie przed uzyskaniem dostępu do ustawień na poziomie zadania. Zobacz Konfigurowanie i edytowanie zadań usługi Databricks.
Monitorowanie obciążeń zadań inferencyjnych GPU za pomocą tables
29 stycznia 2024 r.
Teraz możesz monitorować model procesora GPU obsługujący obciążenia przy użyciu wnioskowania tables. Zobacz wnioskowanie tables, aby monitorować i debugować modele.
Dostęp oparty na ścieżkach URI do zewnętrznego systemu Unity Catalogvolumes
25 stycznia 2024 r.
Teraz można używać identyfikatorów URI magazynu w chmurze do danych dostępnych poprzez ścieżki, zarządzanych przez Unity Catalog, przechowywanych w zewnętrznej volumes. Zobacz Jaka ścieżka jest używana do uzyskiwania dostępu do plików w woluminie?.
Listy kontroli dostępu można włączyć w uaktualnionych obszarach roboczych
24 stycznia 2024 r.
Ustawienia kontroli dostępu zostały włączone we wszystkich obszarach roboczych planu Premium w listopadzie 2023 r.
W przypadku obszarów roboczych, które uaktualniają plan standardowy do planu Premium, ustawienia kontroli dostępu są domyślnie wyłączone. Administratorzy obszaru roboczego mogą teraz włączyć następujące ustawienia kontroli dostępu w uaktualnionych obszarach roboczych:
- Kontrola dostępu do obszaru roboczego: umożliwia użytkownikom konfigurowanie uprawnień do obiektów obszaru roboczego.
- Kontrola dostępu do klastrów, puli, zadań: umożliwia użytkownikom konfigurowanie uprawnień do klastrów, pul i zadań.
- Kontrola widoczności klastra: uniemożliwia wyświetlanie klastrów użytkownikom, którzy nie mają na nich uprawnień.
- Kontrola widoczności zadań: uniemożliwia wyświetlanie zadań użytkownikom, którzy nie mają uprawnień do nich.
- Ustawienie kontroli widoczności obszaru roboczego: uniemożliwia wyświetlanie notesów i folderów użytkownikom, którzy nie mają na nich uprawnień.
Po włączeniu ustawienia kontroli dostępu nie można go wyłączyć. Aby uzyskać więcej informacji, zobacz Listy kontroli dostępu.
System zdarzeń w witrynie Marketplace table teraz dostępny (publiczna wersja zapoznawcza)
24 stycznia 2024 r.>
System Marketplace schema zawiera teraz zdarzenia lejka sprzedażowego table (system.marketplace.listing_funnel_events
) where, dzięki czemu można monitorować działania konsumentów na Twoich ofertach. Zobacz Wyświetlanie listy zdarzeń lejka table.
Zaktualizowany interfejs użytkownika dla komórek notesu (publiczna wersja zapoznawcza)
24 stycznia 2024 r.
Dostępny jest zaktualizowany projekt komórki notesu. Aby włączyć nowy projekt komórki, otwórz stronę ustawień edytora w obszarze roboczym. Na pasku bocznym kliknij pozycję Deweloper. W obszarze Funkcje eksperymentalne przełącz pozycję Nowy interfejs użytkownika komórki. Aby uzyskać szczegółowe informacje na temat pracy z komórkami notesu, zobacz Interfejs i kontrolki notesu usługi Databricks.
Szybka poprawka — pomoc dotycząca błędów składni w notesie
24 stycznia 2024 r.
Możesz get uzyskać pomoc od Asystenta Databricks w przypadku błędów składniowych, korzystając z Quick Fix. Aby uzyskać szczegółowe informacje, zobacz Wyróżnianie błędów języka Python.
Databricks Runtime 14.3 LTS (wersja beta)
22 stycznia 2024 r.
Środowisko Databricks Runtime 14.3 LTS i Databricks Runtime 14.3 LTS ML są teraz dostępne jako wersje beta.
Zobacz Databricks Runtime 14.3 LTS and Databricks Runtime 14.3 LTS for Machine Learning (Środowisko Databricks Runtime 14.3 LTS i Databricks Runtime 14.3 LTS).
Udostępnianie modeli sztucznej inteligencji przy użyciu funkcji udostępniania różnicowego (publiczna wersja zapoznawcza)
19 stycznia 2024 r.
Teraz możesz używać Delta Sharing do udostępniania modeli zarejestrowanych w Unity Catalog. Aby współużytkować modele w Unity Catalog, należy włączyć zarówno obszary robocze dostawcy, jak i odbiorcy.
Zobacz Dodawanie modeli do udziału.
Witryna Marketplace usługi Databricks obsługuje udostępnianie woluminów
18 stycznia 2023 r.
Databricks Marketplace zapewnia teraz dostęp do volumes (danych innych niż tabelaryczne), o ile masz obszar roboczy Databricks z obsługą Unity Catalog. Volumes to obiekty Unity Catalog reprezentujące logiczną przestrzeń magazynową w lokalizacji obiektowej chmury i umożliwiają zarządzanie zgodnością oraz udostępnianie zasobów danych innych niż tabelaryczne.
Zobacz produkty danych w Databricks Marketplace (obszary robocze z obsługą Unity Catalog).
Tworzenie widżetów na podstawie interfejsu użytkownika usługi Databricks
18 stycznia 2024 r.
Teraz możesz tworzyć widżety usługi Databricks przy użyciu interfejsu użytkownika usługi Databricks. Aby uzyskać szczegółowe informacje, zobacz Tworzenie widżetów przy użyciu interfejsu użytkownika.
System zdarzeń magazynu table jest teraz dostępny (publiczna wersja zapoznawcza)
18 stycznia 2024 r.
system.compute.warehouse_events
table zapisują, kiedy magazyny SQL są uruchamiane, zatrzymywane oraz skalowane w górę i w dół. Za pomocą table można monitorować magazyny SQL w swoich obszarach roboczych i zarządzać nimi. Zobacz system wydarzeń magazynowych , odniesienie table,.
Rozmiar pliku obszaru roboczego limit wynosi teraz 500 MB
15 stycznia 2023 r.
Pojedyncze pliki obszaru roboczego są teraz ograniczone do 500 MB. Wcześniej limit był 200 MB. Aby uzyskać więcej informacji, zobacz Ograniczenia.
Powiadomienie o usunięciu funkcji dla starszej integracji z usługą Git w usłudze Databricks
12 stycznia 2024 r.
Po 31 stycznia 2024 r. usługa Databricks removestarszych integracji notesów Git. Ta funkcja jest w starszej wersji od ponad dwóch lat, a powiadomienie o wycofaniu zostało wyświetlone w interfejsie użytkownika produktu od listopada 2023 r.
Aby uzyskać szczegółowe informacje na temat migracji do folderów Git usługi Databricks (Repos), zobacz Przełączanie do repozytoriów usługi Databricks ze starszej integracji z usługą Git. Jeśli to usunięcie wpłynie na Ciebie i potrzebujesz rozszerzenia, skontaktuj się z dyrektorem ds. konta usługi Databricks.
Sterownik ODBC usługi Databricks 2.7.7
9 stycznia 2024 r.
Wydaliśmy wersję 2.7.7 sterownika Databricks ODBC (pobierz). W tej wersji dodano następujące nowe funkcje i ulepszenia:
- Uwierzytelnianie tożsamości zarządzanej platformy Azure.
- Obsługa operacji asynchronicznych metadanych. Serwer musi obsługiwać program
SPARK_CLI_SERVICE_PROTOCOL_V9
i nowsze. - Obsługa zapytania sparametryzowanego w trybie zapytania natywnego. Serwer musi obsługiwać program
SPARK_CLI_SERVICE_PROTOCOL_V8
i nowsze. - Ulepszenie protokołu OAuth: łącznik może teraz wyłączyć pamięć podręczną tokenów dla przepływu uwierzytelniania opartego na przeglądarce.
Ta wersja rozwiązuje również następujące problemy w wersji 2.7.7:
- Łącznik ignoruje prywatny główny urząd certyfikacji podczas korzystania z magazynu zaufania systemu Windows.
- Gdy operacja zakończy się niepowodzeniem, łącznik nie zamyka wątków pulsu.
- Łącznik nie obsługuje opcjonalnego tokenu refresh.
- Podczas wysyłania zapytań do tables z obcymi nazwami, łącznik nie jest w stanie ich odczytać.
- W przypadku korzystania z uwierzytelniania OAuth, jeśli długość ciągu hosta jest mniejsza niż 20, łącznik kończy się nieoczekiwanie.
Zakończenie obsługi środowiska Databricks Runtime 13.2
6 stycznia 2024 r.
Wsparcie dla środowisk Databricks Runtime 13.2 i Databricks Runtime 13.2 dla usługi Machine Learning zakończyło się 6 stycznia. Zobacz Cykle życia pomocy technicznej usługi Databricks.
Funkcje pomocnicze sztucznej inteligencji są domyślnie włączone
2–8 stycznia 2024 r.
Funkcje pomocnicze sztucznej inteligencji są teraz domyślnie włączone dla obszarów roboczych bez włączonego profilu zabezpieczeń zgodności. Są to:
- komentarze generowane przez sztuczną inteligencję dla Catalog zarządzanej platformy Unity tables
- Czatbot pomocy w produkcie
- Asystent usługi Databricks
Administratorzy mogą zrezygnować z funkcji asystacyjnych sztucznej inteligencji dla wszystkich obszarów roboczych na swoim koncie lub w podzestawie obszarów roboczych. Zobacz Artykuł For an account: Disable or enable Databricks Assistant features (Aby uzyskać konto: wyłączanie lub włączanie funkcji Asystenta usługi Databricks).