Dela via


Oktober 2023

Dessa funktioner och förbättringar av Azure Databricks-plattformen släpptes i oktober 2023.

Kommentar

Versioner mellanlagras. Din Azure Databricks-arbetsyta kanske inte uppdateras förrän en vecka eller mer efter det första lanseringsdatumet.

Serverlös säker anslutning för Databricks SQL Serverless (offentlig förhandsversion)

den 31 oktober 2023

Nya serverlösa säkra anslutningsverktyg hjälper dig att styra nätverksåtkomst från serverlösa SQL-lager till dina datakällor i Azure Storage. Du kan välja antingen en lagringsbrandvägg med hjälp av undernäts-ID eller aktivera privat anslutning med Azure Private Link. Kontakta ditt Azure Databricks-kontoteam om du vill ansluta till public preview-. Se Serverlös beräkningsplanets nätverk.

Om du har lagringsbrandväggar som har konfigurerats med hjälp av undernäts-ID:n som fanns med i Azure Databricks-dokumentationen före den 31 oktober 2023 rekommenderar Databricks att du uppdaterar brandväggskonfigurationerna för var och en av dina arbetsyteregioner med något av de nya verktygen. Detta kan hjälpa dig att tillämpa en konsekvent distribution på alla arbetsytor. Om du väljer att inte uppdatera befintliga konfigurationer fortsätter arbetsytor att fungera.

Visa YAML-källan för ett Azure Databricks-jobb

den 30 oktober 2023

Nu kan du visa och kopiera YAML-källan för ett jobb genom att Menyn Kebab klicka på sidan jobbinformation och välja Visa YAML/JSON. Du kan använda YAML-källan för att skapa CI/CD-arbetsflöden med Databricks-tillgångspaket. Se Vad är Databricks-tillgångspaket?.

Lägga till villkorsstyrd logik i dina Azure Databricks-arbetsflöden

den 30 oktober 2023

Du kan nu använda If/else condition uppgiften för att villkorligt köra aktiviteter i ett Azure Databricks-jobb baserat på resultatet av ett booleskt uttryck. Se Lägga till förgreningslogik i ett jobb med uppgiften If/else.

Konfigurera parametrar för ett Azure Databricks-jobb som kan refereras till av alla jobbuppgifter

den 30 oktober 2023

Nu kan du lägga till parametrar i dina Azure Databricks-jobb som automatiskt skickas till alla jobbaktiviteter som accepterar nyckel/värde-par. Se Konfigurera jobbparametrar. Dessutom kan du nu använda en utökad uppsättning värdereferenser för att skicka kontext och tillstånd mellan jobbaktiviteter. Se Vad är en referens för dynamiskt värde?.

Automatisk aktivering av borttagningsvektorer

den 30 oktober 2023

Nu kan du aktivera borttagningsvektorer i alla nya Delta-tabeller i Databricks Runtime 14.0 och senare med administratörsinställningen för arbetsytan Automatisk aktivering av borttagningsvektorer. Det här beteendet är för närvarande anmält men kommer att ändras till att välja bort i framtiden. Databricks rekommenderar att du konfigurerar ett alternativ för den här inställningen manuellt. Se Automatisk aktivering av borttagningsvektorer.

Stöd för Unity Catalog för UNDROP TABLE är GA

den 25 oktober 2023

Du kan återställa en borttagen hanterad eller extern tabell i ett befintligt schema inom sju dagar efter att den har tagits bort. Kräver Databricks Runtime 12.1 och senare. Se UNDROP TABLE och SHOW TABLES DROPPED.

Partner Connect stöder Dataiku

den 25 oktober 2023

Nu kan du använda Partner Connect för att ansluta din Azure Databricks-arbetsyta till Dataiku. Se Ansluta till Dataiku.

AutoML-genererade notebook-filer sparas nu som MLflow-artefakter

den 24 oktober 2023

AutoML-genererade notebook-filer sparas nu som MLflow-artefakter i alla Databricks Runtime för Machine Learning-versioner.

Ny region: Qatar Central

den 23 oktober 2023

Azure Databricks är nu tillgängligt i Qatar Central. Se Azure Databricks-regioner.

den 23 oktober 2023

Nu kan du använda Unity Catalog-volymer tillsammans med Azure Storage-konton som konfigurerats med Azure Firewall eller Private Link. Detta tar bort en tidigare begränsning.

Förutsägelseoptimering (offentlig förhandsversion)

den 24 oktober 2023

Förutsägande optimering tar bort behovet av att manuellt hantera underhållsåtgärder för Delta-tabeller. Underhållsåtgärder körs bara efter behov, vilket eliminerar både onödiga körningar för underhållsåtgärder och belastning som är associerade med spårnings- och felsökningsprestanda. Se Förutsägelseoptimering för hanterade Unity Catalog-tabeller.

Beräkningssystemtabeller är nu tillgängliga (offentlig förhandsversion)

den 23 oktober 2023

Schemat system.compute innehåller två nya tabeller som du kan använda för att övervaka beräkningsresurserna i ditt konto: clusters och node_types.

Klustertabellen är en långsamt föränderlig dimensionstabell som innehåller hela historiken för klusterkonfigurationer över tid för kluster för alla syften och jobbkluster. Tabellen nodtyper samlar in de tillgängliga nodtyperna med sin grundläggande maskinvaruinformation. Om du inte har åtkomst till dessa systemtabeller kontrollerar du att du har aktiverat beräkningsschemat i ditt konto (se Aktivera systemtabellscheman).

Mer information om beräkningssystemtabeller finns i referensen Beräkningssystemtabeller.

Funktionsberäkning på begäran är GA

den 19 oktober 2023

Maskininlärningsfunktioner kan nu beräknas på begäran vid inferens. Detta gör det möjligt för modeller att beräkna egenskaper med indata som endast är tillgängliga vid slutsats, till exempel en användares aktuella plats, eller att använda egenskaper som är kostsamma att förberäkna, lagra och uppdatera. Modellträningskod kan definiera ett godtyckligt diagram över funktionssökningar och beräkningar som körs under modellträning och slutsatsdragning.

Funktionsberäkningslogik, modeller och data styrs alla av Unity Catalog. Mer information finns i Beräkningsfunktioner på begäran med hjälp av användardefinierade Python-funktioner.

Funktionsutveckling i Unity Catalog är GA

den 19 oktober 2023

Med funktionsutveckling i Unity Catalogblir Unity Catalog din funktionsbutik. Du kan använda valfri Delta-tabell med en primärnyckel som funktionstabell för modellträning eller slutsatsdragning. Unity Catalog tillhandahåller funktionsidentifiering och styrning.

AI-genererade tabellkommentar (offentlig förhandsversion)

den 18 oktober 2023

Som en del av initiativet att använda AI för att hjälpa dig när du arbetar med Azure Databricks introducerar Azure Databricks AI-genererade tabell- och kolumnkommentorer till offentlig förhandsversion. I Katalogutforskaren kan du visa, redigera och lägga till en AI-genererad kommentar för en tabell eller tabellkolumn som hanteras av Unity Catalog. AI-genererade kommentarer kan använda externa modellpartners för att ge svar. Data som skickas till dessa tjänster används inte för modellträning.

Se Lägg till AI-genererade kommentarer till Unity Catalog-objekt.

Modeller i Unity Catalog är GA

den 17 oktober 2023

ML-modeller i Unity Catalog är nu allmänt tillgängliga. Unity Catalog tillhandahåller centraliserad åtkomstkontroll, granskning, spårbarhet, modelldelning mellan arbetsområden och arbetsflöden för bättre MLOps-distribution. Azure Databricks rekommenderar att du använder modeller i Unity Catalog i stället för arbetsytemodellregistret. Mer information finns i Hantera modelllivscykel i Unity Catalog.

Bibliotek stöds nu i beräkningsprinciper (offentlig förhandsversion)

den 17 oktober 2023

Arbetsyteadministratörer kan nu lägga till bibliotek i beräkningsprinciper. Beräkning som använder principen installerar biblioteket automatiskt. Användare kan inte installera eller avinstallera bibliotek med beräkningsomfång vid beräkning som använder principen. Tidigare installerade bibliotek avinstalleras.

Databricks rekommenderar att du migrerar alla bibliotek som är installerade med init-skript för att använda beräkningsprinciper. Se Lägga till bibliotek i en princip.

Partner Connect stöder Monte Carlo

den 16 oktober 2023

Nu kan du använda Partner Connect för att ansluta din Azure Databricks-arbetsyta till Monte Carlo. Mer information finns i Ansluta Azure Databricks till Monte Carlo.

Semantisk sökning (offentlig förhandsversion)

den 16 oktober 2023

Nu kan du använda naturligt språk för att söka i Unity Catalog-tabeller i dialogrutan avancerad Sök. Se Semantisk sökning.

Aktivera Databricks Assistant på arbetsytenivå

den 11 oktober 2023

En arbetsyteadministratör kan nu aktivera eller inaktivera Databricks Assistant för en enskild arbetsyta om kontoadministratören har tillåtit det. Mer information finns i Hur gör jag för att aktivera Databricks Assistant?.

Nya photon-standardvärden

den 11 oktober 2023

När du skapar ett nytt kluster via användargränssnittet är Standardmotorn för Databricks Runtime Photon aktiverad. Detta gäller för kluster för alla syften och jobb.

Nya kluster som skapats med en klusterprincip som är Photon-kompatibel har Photon aktiverat som standard. En klusterprincip är Photon-kompatibel om Databricks Runtime stöder den, nodtypen stöds och runtime_engine inte uttryckligen anges till STANDARD.

Databricks Runtime 14.1 är GA

den 11 oktober 2023

Databricks Runtime 14.1 och Databricks Runtime 14.1 ML är nu allmänt tillgängliga.

Se Databricks Runtime 14.1 och Databricks Runtime 14.1 för Machine Learning.

Utvecklarverktyg viktig information har flyttats

den 10 oktober 2023

Viktig information för Azure Databricks-utvecklarverktyg efter den 10 oktober 2023 publiceras nu i Azure Databricks-utvecklarverktygen och SDK:erna i stället för viktig information om Azure Databricks-plattformen.

Databricks-tillägget för Visual Studio Code har uppdaterats till version 1.1.5

den 9 oktober 2023

Databricks-tillägget för Visual Studio Code version 1.1.5 innehåller några mindre korrigeringar. Mer information finns i ändringsloggen för version 1.1.5.

Förutsägande I/O för uppdateringar är GA

den 9 oktober 2023

Förutsägande I/O för uppdateringar är nu allmänt tillgängligt på Databricks Runtime 14.0 och senare. Se Vad är förutsägande I/O?.

Borttagningsvektorer är GA

den 9 oktober 2023

Borttagningsvektorer är nu allmänt tillgängliga på Databricks Runtime 14.0 och senare. Se Vad är borttagningsvektorer?.

Partner Connect stöder RudderStack

den 5 oktober 2023

Nu kan du använda Partner Connect för att ansluta din Azure Databricks-arbetsyta till RudderStack. Mer information finns i Ansluta till RudderStack.

Databricks CLI har uppdaterats till version 0.207.0 (offentlig förhandsversion)

4 oktober 2023

Databricks kommandoradsgränssnitt (Databricks CLI) har uppdaterats till version 0.207.0. Den här versionen innehåller funktionsuppdateringar och korrigeringar för Databricks-tillgångspaket, gör tillägg och ändringar i flera kommandogrupper och kommandon med mera. Mer information finns i ändringsloggen för version 0.207.0.

Kör markerade celler i en notebook-fil

4 oktober 2023

Nu kan du bara köra markerade celler i en notebook-fil. Se Kör markerade celler.

Använd workspace-katalogbindning för att ge lästillgång till en katalog

4 oktober 2023

När du använder katalogbindning för arbetsytor för att begränsa katalogåtkomsten till specifika arbetsytor i ditt konto kan du nu göra åtkomsten skrivskyddad. Skrivskyddad katalogbindning för arbetsytor är användbart för scenarier som att ge användarna skrivskyddad åtkomst till produktionsdata från en arbetsyta för utvecklare för att möjliggöra utveckling och testning.

Den här uppdateringen gör också API-slutpunkten /api/2.1/unity-catalog/workspace-bindings/ föråldrad och ersätter den med /api/2.1/unity-catalog/bindings/.

Se Begränsa katalogåtkomst till specifika arbetsytor.

Databricks-tillägget för Visual Studio Code har uppdaterats till version 1.1.4

2 oktober 2023

Databricks-tillägget för Visual Studio Code version 1.1.4 lägger till stöd för anpassade URL:er för Azure Databricks-arbetsytor med mera. Mer information finns i ändringsloggen för version 1.1.4.

Databricks SDK för Python har uppdaterats till version 0.10.0 (Beta)

den 3 oktober 2023

Databricks SDK för Python version 0.10.0 introducerar 7 icke-bakåtkompatibla ändringar, lägger till 10 dataklasser, lägger till 6 fält och lägger till en tjänst. Mer information finns i ändringsloggen för version 0.10.0.

Databricks SDK för Go har uppdaterats till version 0.22.0 (Beta)

den 3 oktober 2023

Databricks SDK för Go version 0.22.0 introducerar en icke-bakåtkompatibel API-ändring och lägger till ett API. Mer information finns i ändringsloggen för version 0.22.0.

Unity Catalog-volymer nu i offentlig förhandsversion för Azure Kina

2 oktober 2023

Unity Catalog-volymer är nu tillgängliga som en offentlig förhandsversionsfunktion i Azure Kina-regioner. Se Vad är en Unity Catalog-volym?.