Styczeń 2024
Te funkcje i ulepszenia platformy Azure Databricks zostały wydane w styczniu 2024 r.
Uwaga
Wydania są etapowe. Twoje konto usługi Azure Databricks może nie zostać zaktualizowane do tygodnia lub więcej po początkowej dacie wydania.
Obsługa natywnego formatu pliku XML (publiczna wersja zapoznawcza)
31 stycznia 2024 r.
Natywna obsługa formatu pliku XML jest teraz dostępna w publicznej wersji zapoznawczej. Obsługa formatu pliku XML umożliwia pozyskiwanie, wykonywanie zapytań i analizowanie danych XML na potrzeby przetwarzania wsadowego lub przesyłania strumieniowego. Może automatycznie wnioskować i rozwijać schemat i typy danych, obsługuje wyrażenia SQL, takie jak from_xml
, i mogą generować dokumenty XML. Nie wymaga on zewnętrznych plików JAR i bezproblemowo współpracuje z modułem automatycznego ładowania, read_files
, COPY INTO
i tabelami delta live. Aby uzyskać więcej informacji, zobacz Odczytywanie i zapisywanie plików XML.
Udostępnianie modeli sztucznej inteligencji przy użyciu witryny Databricks Marketplace (publiczna wersja zapoznawcza)
31 stycznia 2024 r.
Teraz można korzystać z Marketplace do udostępniania modeli zarejestrowanych w Unity Catalog. Aby Unity Catalog mógł uczestniczyć w udostępnianiu modeli, należy włączyć zarówno obszar roboczy dostawcy, jak i obszar roboczy konsumenta.
Zobacz Co to jest witryna Databricks Marketplace? i Dodaj modele do udziału.
aktualizacje reguł grupy zabezpieczeń sieciowych
31 stycznia 2024 r.
Aby zwiększyć skalowalność platformy, płaszczyzna sterowania usługi Azure Databricks wymaga teraz nowych punktów końcowych dla klasycznej płaszczyzny danych do nawiązania połączenia. W przypadku obszarów roboczych wdrożonych we własnej sieci wirtualnej platformy Azure porty sieciowe 3306 i 8443-8451 są teraz dodawane do istniejącej reguły zabezpieczeń do AzureDatabricks
miejsca docelowego, wymuszając ruch wychodzący na porcie 443.
Aby uzyskać więcej informacji, zobacz Reguły sieciowej grupy zabezpieczeń.
Aktualizacja ścieżki obszaru roboczego
W przeszłości użytkownicy musieli uwzględnić /Workspace
prefiks ścieżki dla niektórych interfejsów API usługi Databricks (%sh
), ale nie dla innych (%run
dane wejściowe interfejsu API REST). Teraz użytkownicy mogą udostępniać ścieżki obszaru roboczego z prefiksem /Workspace
wszędzie w usłudze Databricks. Stare odwołania do ścieżek bez prefiksu /Workspace
są przekierowywane i będą nadal działać. Usługa Databricks zaleca, aby wszystkie ścieżki obszaru roboczego używały prefiksu /Workspace
, aby odróżnić je od ścieżek woluminów i systemu plików DBFS.
Obsługa zapory usługi Azure Storage z zasobów obliczeniowych bezserwerowych jest ogólnie dostępna
30 stycznia 2024 r.
Obsługa zapory usługi Azure Storage z zasobów obliczeniowych bezserwerowych usługi Azure Databricks jest ogólnie dostępna. Możesz wymusić, że bezserwerowe magazyny SQL używają stabilnych identyfikatorów podsieci w celu nawiązania połączenia z usługą Azure Storage i listy dozwolonych tych identyfikatorów w zaporze zasobów platformy Azure. Zobacz Konfigurowanie zapory na potrzeby bezserwerowego dostępu obliczeniowego.
Usprawnione tworzenie zadań usługi Azure Databricks
29 stycznia 2024 r.
Puste zadanie jest teraz tworzone natychmiast po kliknięciu przycisku w celu utworzenia zadania, co umożliwia edytowanie ustawień na poziomie zadania, takich jak tagi, harmonogram lub ustawienia powiadomień przed dodaniem pierwszego zadania. Wcześniej trzeba było utworzyć pierwsze zadanie przed uzyskaniem dostępu do ustawień na poziomie zadania. Zobacz Konfigurowanie i edytowanie zadań usługi Databricks.
Monitorowanie modelu procesora GPU obsługującego obciążenia przy użyciu tabel wnioskowania
29 stycznia 2024 r.
Teraz możesz monitorować model procesora GPU obsługujący obciążenia przy użyciu tabel wnioskowania. Zobacz tabele wnioskowania na potrzeby monitorowania i debugowania modeli.
Dostęp bazujący na ścieżkach identyfikatora URI do woluminów zewnętrznych Unity Catalog
25 stycznia 2024 r.
Teraz można używać URI magazynu w chmurze do dostępu opartego na ścieżkach do danych zarządzanych przez Unity Catalog, przechowywanych w woluminach zewnętrznych. Zobacz Jaka ścieżka jest używana do uzyskiwania dostępu do plików w woluminie?.
Listy kontroli dostępu można włączyć w uaktualnionych obszarach roboczych
24 stycznia 2024 r.
Ustawienia kontroli dostępu zostały włączone we wszystkich obszarach roboczych planu Premium w listopadzie 2023 r.
W przypadku obszarów roboczych, które uaktualniają plan standardowy do planu Premium, ustawienia kontroli dostępu są domyślnie wyłączone. Administratorzy obszaru roboczego mogą teraz włączyć następujące ustawienia kontroli dostępu w uaktualnionych obszarach roboczych:
- Kontrola dostępu do obszaru roboczego: umożliwia użytkownikom konfigurowanie uprawnień do obiektów obszaru roboczego.
- Kontrola dostępu do klastrów, puli, zadań: umożliwia użytkownikom konfigurowanie uprawnień do klastrów, pul i zadań.
- Kontrola widoczności klastra: uniemożliwia wyświetlanie klastrów użytkownikom, którzy nie mają na nich uprawnień.
- Kontrola widoczności zadań: uniemożliwia wyświetlanie zadań użytkownikom, którzy nie mają uprawnień do nich.
- Ustawienie kontroli widoczności obszaru roboczego: uniemożliwia wyświetlanie notesów i folderów użytkownikom, którzy nie mają na nich uprawnień.
Po włączeniu ustawienia kontroli dostępu nie można go wyłączyć. Aby uzyskać więcej informacji, zobacz Listy kontroli dostępu.
Tabela systemu wydarzeń ofert Marketplace jest teraz dostępna (wersja publiczna do zapoznania).
24 stycznia 2024 r.>
Schemat systemu Marketplace zawiera teraz tabelę zdarzeń lejka sprzedażowego (system.marketplace.listing_funnel_events
), w której można monitorować akcje konsumentów w swoich ofertach. Zobacz tabelę zdarzeń lejka .
Zaktualizowany interfejs użytkownika dla komórek notesu (publiczna wersja zapoznawcza)
24 stycznia 2024 r.
Dostępny jest zaktualizowany projekt komórki notesu. Aby włączyć nowy projekt komórki, otwórz stronę ustawień edytora w obszarze roboczym. Na pasku bocznym kliknij pozycję Deweloper. W obszarze Funkcje eksperymentalne przełącz pozycję Nowy interfejs użytkownika komórki. Aby uzyskać szczegółowe informacje na temat pracy z komórkami notesu, zobacz Dostosowywanie wyglądu notesu.
Szybka poprawka — pomoc dotycząca błędów składni w notesie
24 stycznia 2024 r.
Możesz uzyskać pomoc od Asystenta usługi Databricks pod kątem błędów składniowych, korzystając z Quick Fix. Aby uzyskać szczegółowe informacje, zobacz Wyróżnianie błędów języka Python.
Databricks Runtime 14.3 LTS (wersja beta)
22 stycznia 2024 r.
Środowisko Databricks Runtime 14.3 LTS i Databricks Runtime 14.3 LTS ML są teraz dostępne jako wersje beta.
Zobacz Databricks Runtime 14.3 LTS and Databricks Runtime 14.3 LTS for Machine Learning (Środowisko Databricks Runtime 14.3 LTS i Databricks Runtime 14.3 LTS).
Udostępnianie modeli sztucznej inteligencji przy użyciu funkcji udostępniania różnicowego (publiczna wersja zapoznawcza)
19 stycznia 2024 r.
Teraz możesz używać Delta Sharing do dzielenia się modelami zarejestrowanymi w Unity Catalog. Aby Unity Catalog mógł udostępniać modele, należy włączyć zarówno obszary robocze dostawcy, jak i odbiorcy.
Zobacz Dodawanie modeli do udziału.
Witryna Marketplace usługi Databricks obsługuje udostępnianie woluminów
18 stycznia 2023 r.
Marketplace Databricks umożliwia teraz dostęp do woluminów (danych innych niż tabelaryczne), o ile masz obszar roboczy usługi Databricks z obsługą katalogu Unity. Woluminy to obiekty Katalogu Unity, które reprezentują logiczny wolumin magazynowania w lokalizacji magazynu obiektów w chmurze i umożliwiają zarządzanie zgodnością oraz udostępnianiem zasobów danych innych niż tabelaryczne.
Tworzenie widżetów na podstawie interfejsu użytkownika usługi Databricks
18 stycznia 2024 r.
Teraz możesz tworzyć widżety usługi Databricks przy użyciu interfejsu użytkownika usługi Databricks. Aby uzyskać szczegółowe informacje, zobacz Tworzenie widżetów przy użyciu interfejsu użytkownika.
Tabela systemu zdarzeń magazynu jest teraz dostępna (publiczna wersja zapoznawcza)
18 stycznia 2024 r.
Tabela system.compute.warehouse_events
rejestruje, kiedy magazyny SQL są uruchamiane, zatrzymywane oraz skalowane w górę i w dół. Za pomocą tabeli można monitorować magazyny SQL w swoich obszarach roboczych i zarządzać nimi. Zobacz tabelę referencyjną systemu zdarzeń magazynu .
Limit rozmiaru pliku obszaru roboczego wynosi teraz 500 MB
15 stycznia 2023 r.
Pojedyncze pliki obszaru roboczego są teraz ograniczone do 500 MB. Wcześniej limit wynosił 200 MB. Aby uzyskać więcej informacji, zobacz Ograniczenia.
Powiadomienie o usunięciu funkcji dla starszej integracji z usługą Git w usłudze Databricks
12 stycznia 2024 r.
Po 31 stycznia 2024 r. usługa Databricks usunie starszych integracji notesów Git. Ta funkcja jest w starszej wersji od ponad dwóch lat, a powiadomienie o wycofaniu zostało wyświetlone w interfejsie użytkownika produktu od listopada 2023 r.
Aby uzyskać szczegółowe informacje na temat migracji do folderów Git usługi Databricks (Repos), zobacz Przełączanie do repozytoriów usługi Databricks ze starszej integracji z usługą Git. Jeśli to usunięcie wpłynie na Ciebie i potrzebujesz rozszerzenia, skontaktuj się z dyrektorem ds. konta usługi Databricks.
Sterownik ODBC usługi Databricks 2.7.7
9 stycznia 2024 r.
Wydaliśmy wersję 2.7.7 sterownika Databricks ODBC (pobierz). W tej wersji dodano następujące nowe funkcje i ulepszenia:
- Uwierzytelnianie tożsamości zarządzanej platformy Azure.
- Obsługa operacji asynchronicznych metadanych. Serwer musi obsługiwać program
SPARK_CLI_SERVICE_PROTOCOL_V9
i nowsze. - Obsługa zapytania sparametryzowanego w trybie zapytania natywnego. Serwer musi obsługiwać program
SPARK_CLI_SERVICE_PROTOCOL_V8
i nowsze. - Ulepszenie protokołu OAuth: łącznik może teraz wyłączyć pamięć podręczną tokenów dla przepływu uwierzytelniania opartego na przeglądarce.
Ta wersja rozwiązuje również następujące problemy w wersji 2.7.7:
- Łącznik ignoruje prywatny główny urząd certyfikacji podczas korzystania z magazynu zaufania systemu Windows.
- Gdy operacja zakończy się niepowodzeniem, łącznik nie zamyka wątków pulsu.
- Łącznik nie obsługuje opcjonalnego tokenu odświeżania.
- Podczas wykonywania zapytań dotyczących tabel z nazwami obcymi łącznik nie może ich odczytać.
- W przypadku korzystania z uwierzytelniania OAuth, jeśli długość ciągu hosta jest mniejsza niż 20, łącznik kończy się nieoczekiwanie.
Zakończenie obsługi środowiska Databricks Runtime 13.2
6 stycznia 2024 r.
Wsparcie dla środowisk Databricks Runtime 13.2 i Databricks Runtime 13.2 dla usługi Machine Learning zakończyło się 6 stycznia. Zobacz Cykle życia pomocy technicznej usługi Databricks.
Funkcje pomocnicze sztucznej inteligencji są domyślnie włączone
2–8 stycznia 2024 r.
Funkcje pomocnicze sztucznej inteligencji są teraz domyślnie włączone dla obszarów roboczych bez włączonego profilu zabezpieczeń zgodności. Są to:
- Komentarze wygenerowane przez sztuczną inteligencję dla tabel zarządzanych przez Unity Catalog
- Czatbot pomocy w produkcie
- Asystent usługi Databricks
Administratorzy mogą zrezygnować z funkcji asystacyjnych sztucznej inteligencji dla wszystkich obszarów roboczych na swoim koncie lub w podzestawie obszarów roboczych. Zobacz Artykuł For an account: Disable or enable Databricks Assistant features (Aby uzyskać konto: wyłączanie lub włączanie funkcji Asystenta usługi Databricks).