Oktober 2023
Deze functies en azure Databricks-platformverbeteringen zijn uitgebracht in oktober 2023.
Notitie
Releases worden gefaseerd. Uw Azure Databricks-werkruimte wordt mogelijk pas na een week of meer bijgewerkt na de eerste releasedatum.
Serverloze beveiligde connectiviteit voor Databricks SQL Serverless (openbare preview)
31 oktober 2023
Nieuwe serverloze hulpprogramma's voor beveiligde connectiviteit helpen u de netwerktoegang van serverloze SQL-warehouses tot uw gegevensbronnen in Azure Storage te beheren. U kunt een opslagfirewall kiezen met behulp van subnet-id's of privéconnectiviteit inschakelen met Azure Private Link. Als u de openbare preview-wilt join, neemt u contact op met uw Azure Databricks-accountteam. Zie Serverloze rekenvlaknetwerken.
Als u opslagfirewalls hebt die zijn geconfigureerd met subnet-id's die vóór 31 oktober 2023 zijn vermeld in azure Databricks-documentatie, raadt Databricks u aan om uw firewallconfiguraties voor elk van uw werkruimteregio's te update met behulp van een van de nieuwe hulpprogramma's. Dit kan u helpen bij het toepassen van een consistente implementatie in alle werkruimten. Als u ervoor kiest om bestaande configuraties niet te update, blijven werkruimten werken.
De YAML-bron voor een Azure Databricks-taak weergeven
30 oktober 2023
U kunt nu de YAML-bron voor een taak bekijken en kopiëren door op de pagina met taakdetails te klikken 
en YAML/JSON weergeven te selecteren. U kunt de YAML-bron gebruiken om CI/CD-werkstromen te maken met Databricks Asset Bundles. Bekijk wat zijn Databricks Asset Bundles?.
Voorwaardelijke logica toevoegen aan uw Azure Databricks-werkstromen
30 oktober 2023
U kunt de If/else condition taak nu gebruiken om taken voorwaardelijk uit te voeren in een Azure Databricks-taak op basis van de resultaten van een Boole-expressie. Zie Vertakkingslogica toevoegen aan een taak met de taak If/else.
parameters configureren voor een Azure Databricks-taak waarnaar kan worden verwezen door alle taaktaken
30 oktober 2023
U kunt nu parameters toevoegen aan uw Azure Databricks-taken die automatisch worden doorgegeven aan alle taaktaken die sleutel-waardeparen accepteren. Zie Taak configureren parameters. Daarnaast kunt u nu een uitgebreide set-waardeverwijzing gebruiken om context en status tussen taken over te dragen. Zie Wat is een verwijzing naar dynamische waarden?
Verwijderingsvectoren automatisch inschakelen
30 oktober 2023
U kunt nu verwijderingsvectoren inschakelen voor alle nieuwe Delta-tables in Databricks Runtime 14.0 en hoger met de werkruimtebeheerdersinstelling verwijderingsvectoren automatisch inschakelen. Dit gedrag is momenteel opt-in, maar wordt in de toekomst gewijzigd in opt-out. Databricks raadt u aan om handmatig een optie voor deze instelling te configureren. Zie Verwijdervectoren automatisch inschakelen.
Unity Catalog-ondersteuning voor UNDROP TABLE is algemeen beschikbaar
25 oktober 2023
U kunt binnen zeven dagen na het verwijderen een verwijderde beheerde of externe table in een bestaande schema herstellen. Vereist Databricks Runtime 12.1 en hoger. Zie UNDROP TABLE en SHOW TABLES DROPPED.
Partner Connect ondersteunt Dataiku
25 oktober 2023
U kunt nu Partner Connect gebruiken om uw Azure Databricks-werkruimte te verbinden met Dataiku. Zie Verbinding maken met Dataiku.
Automatisch gegenereerde notebooks worden nu opgeslagen als MLflow-artefacten
24 oktober 2023
Door AutoML gegenereerde notebooks worden nu opgeslagen als MLflow-artefacten in alle Databricks Runtime voor Machine Learning-versies.
Nieuwe regio: Qatar Central
23 oktober 2023
Azure Databricks is nu beschikbaar in Qatar Central. Zie Azure Databricks-regio's.
Unity Catalogvolumes ondersteund met Azure Firewall en Private Link
23 oktober 2023
U kunt nu Unity Catalogvolumes gebruiken in combinatie met Azure-opslagaccounts die zijn geconfigureerd met Azure Firewall of Private Link. Hiermee verwijdert u een eerdere beperking.
Voorspellende optimalisatie (openbare preview)
24 oktober 2023
Met voorspellende optimalisatie hoeft u geen onderhoudsbewerkingen voor Delta tableshandmatig te beheren. Onderhoudsbewerkingen worden alleen uitgevoerd als dat nodig is, waardoor zowel onnodige uitvoeringen voor onderhoudsbewerkingen als lasten worden geëlimineerd die gepaard gaan met het bijhouden en oplossen van prestaties. Zie Predictive Optimization voor Unity Catalog beheerde tables.
Rekensysteem tables zijn nu beschikbaar (openbare preview)
23 oktober 2023
De system.computeschema bevat twee nieuwe tables die u kunt gebruiken om de rekenresources in uw account te controleren: clusters en node_types.
De clusters table is een langzaam veranderende dimensie table die de volledige geschiedenis van clusterconfiguraties in de loop van de tijd bevat voor clusters met alle doeleinden en taken. De knooppunttypen table legt de momenteel beschikbare knooppunttypen vast met hun basishardwaregegevens. Als u geen toegang hebt tot dit systeem-tables, zorg ervoor dat de compute-schema is ingeschakeld in uw account (zie Systeemschema's inschakelen table).
Zie Compute-systeem tables referentievoor meer informatie over tablesrekensysteem.
Berekening van functies op aanvraag is algemeen beschikbaar
19 oktober 2023
Machine learning-functies kunnen nu op aanvraag op deductietijd worden berekend. Hierdoor kunnen modellen kenmerken berekenen met behulp van invoer die alleen beschikbaar is tijdens inferentietijd, zoals de huidige locatie van een gebruiker, of om kenmerken te gebruiken die te duur zijn om vooraf te berekenen, op te slaan en refresh. Modeltrainingscode kan een willekeurige grafiek definiëren van functiezoekacties en berekeningen die worden uitgevoerd tijdens modeltraining en deductie.
Functieberekeningslogica, modellen en gegevens worden allemaal beheerd door Unity Catalog. Zie Compute-functies op aanvraag met behulp van door de gebruiker gedefinieerde Python-functies voor meer informatie.
Functie-engineering in Unity Catalog is algemeen beschikbaar
19 oktober 2023
Met Feature Engineering in Unity Catalogwordt Unity Catalog uw functiearchief. U kunt een Delta-table met een primaire sleutel gebruiken als kenmerk table voor modeltraining of inferentie. Unity Catalog biedt functiedetectie en -governance.
Door AI gegenereerde table opmerkingen (openbare preview)
18 oktober 2023
Als onderdeel van het initiatief om AI te gebruiken om u te helpen bij het werken met Azure Databricks, introduceert Azure Databricks door AI gegenereerde table en column opmerkingen bij openbare preview. In Catalog Explorer kunt u een door AI gegenereerde opmerking bekijken, bewerken en toevoegen voor alle table of tablecolumn die worden beheerd door Unity Catalog. Door AI gegenereerde opmerkingen kunnen externe modelpartners gebruiken om antwoorden te geven. Gegevens die naar deze services worden verzonden, worden niet gebruikt voor modeltraining.
Zie Door AI gegenereerde opmerkingen toevoegen aan Unity-Catalog-objecten.
Modellen in Unity Catalog zijn nu algemeen beschikbaar
17 oktober 2023
ML-modellen in Unity Catalog zijn nu algemeen beschikbaar. Unity Catalog biedt gecentraliseerd toegangsbeheer, auditing, herkomst, modeldeling in werkruimten en betere workflows voor MLOps-implementatie. Azure Databricks raadt aan modellen te gebruiken in Unity Catalog in plaats van het werkruimtemodelregister. Zie Levenscyclus van modellen beheren in Unity Catalog voor meer informatie.
Bibliotheken die nu worden ondersteund in rekenbeleid (openbare preview)
17 oktober 2023
Werkruimtebeheerders kunnen nu bibliotheken toevoegen aan rekenbeleid. Rekenkracht die gebruikmaakt van het beleid, installeert de bibliotheek automatisch. Gebruikers kunnen geen bibliotheken met rekenbereik installeren of verwijderen voor berekeningen die gebruikmaken van het beleid. Eerder geïnstalleerde bibliotheken worden verwijderd.
Databricks raadt aan alle bibliotheken te migreren die zijn geïnstalleerd met init-scripts om rekenbeleid te gebruiken. Zie Bibliotheken toevoegen aan een beleid.
Partner Connect ondersteunt Monte Carlo
16 oktober 2023
U kunt nu Partner Connect gebruiken om uw Azure Databricks-werkruimte te verbinden met Monte Carlo. Zie Azure Databricks verbinden met Monte Carlo voor meer informatie.
Semantisch zoeken (openbare preview)
16 oktober 2023
U kunt nu met natuurlijke taal zoeken in Unity Catalogtables via de geavanceerde zoeken dialoog. Zie Semantische zoekopdrachten.
Databricks Assistant inschakelen op werkruimteniveau
11 oktober 2023
Een werkruimtebeheerder kan nu Databricks Assistant in- of uitschakelen voor een afzonderlijke werkruimte als de accountbeheerder dit heeft toegestaan. Zie Hoe kan ik Databricks Assistant inschakelen voor meer informatie.
Standaardwaarden voor nieuwe foton
11 oktober 2023
Bij het maken van een nieuw cluster via de gebruikersinterface is de standaard Databricks Runtime-engine Photon ingeschakeld. Dit geldt voor alle doeleinden en taakclusters.
Nieuwe clusters die zijn gemaakt met een clusterbeleid dat compatibel is met Photon, hebben Photon standaard ingeschakeld. Een clusterbeleid is compatibel met Photon als Databricks Runtime dit ondersteunt, het knooppunttype wordt ondersteund en de runtime_engine niet expliciet wordt set voor STANDARD.
Databricks Runtime 14.1 is algemeen beschikbaar
11 oktober 2023
Databricks Runtime 14.1 en Databricks Runtime 14.1 ML zijn nu algemeen beschikbaar.
Zie Databricks Runtime 14.1 en Databricks Runtime 14.1 voor Machine Learning.
Releaseopmerkingen voor ontwikkelhulpprogramma's zijn verplaatst
10 oktober 2023
Releaseopmerkingen voor Azure Databricks-ontwikkelhulpprogramma's na 10 oktober 2023 worden nu gepost in de releaseopmerkingen voor Ontwikkelaars en SDK's van Azure Databricks in plaats van de releaseopmerkingen voor het Azure Databricks-platform.
Databricks-extensie voor Visual Studio Code bijgewerkt naar versie 1.1.5
9 oktober 2023
De Databricks-extensie voor Visual Studio Code versie 1.1.5 bevat enkele kleine oplossingen. Zie het wijzigingenlogboek voor versie 1.1.5 voor meer informatie.
Voorspellende I/O voor updates is algemeen beschikbaar
9 oktober 2023
Voorspellende I/O voor updates is nu algemeen beschikbaar op Databricks Runtime 14.0 en hoger. Zie Wat is voorspellende I/O?.
Verwijderingsvectoren zijn ALGEMENE beschikbaarheid
9 oktober 2023
Verwijderingsvectoren zijn nu algemeen beschikbaar op Databricks Runtime 14.0 en hoger. Zie Wat zijn verwijderingsvectoren?
Partner Connect ondersteunt RudderStack
5 oktober 2023
U kunt nu Partner Connect gebruiken om uw Azure Databricks-werkruimte te verbinden met RudderStack. Zie Verbinding maken met RudderStack voor meer informatie.
Databricks CLI bijgewerkt naar versie 0.207.0 (openbare preview)
4 oktober 2023
De Databricks-opdrachtregelinterface (Databricks CLI) is bijgewerkt naar versie 0.207.0. Deze release bevat functie-updates en oplossingen voor Databricks Asset Bundles, brengt toevoegingen en wijzigingen aan verschillende opdrachtgroepen en opdrachten aan, en meer. Zie het wijzigingenlogboek voor versie 0.207.0 voor meer informatie.
Geselecteerde cellen uitvoeren in een notebook
4 oktober 2023
U kunt nu alleen geselecteerde cellen in een notebook uitvoeren. Zie Geselecteerde cellen uitvoeren.
Werkruimte gebruiken-catalog binding om alleen-lezentoegang te geven tot een catalog
4 oktober 2023
Wanneer u werkruimte gebruikt:catalog binding voor limitcatalog toegang tot specifieke werkruimten in uw account, kunt u die toegang nu alleen-lezen maken. Alleen-lezen werkruimte:catalog binding is handig voor scenario's zoals het geven van alleen-lezentoegang tot productiegegevens vanuit een werkruimte voor ontwikkelaars om ontwikkeling en testen mogelijk te maken.
Dit update ook het /api/2.1/unity-catalog/workspace-bindings/ API-eindpunt afgeschaft en vervangen door /api/2.1/unity-catalog/bindings/.
Zie Limitcatalog toegang tot specifieke werkruimten.
Databricks-extensie voor Visual Studio Code bijgewerkt naar versie 1.1.4
2 oktober 2023
De Databricks-extensie voor Visual Studio Code versie 1.1.4 voegt ondersteuning toe voor aangepaste URL's voor Azure Databricks-werkruimten en meer. Zie het wijzigingenlogboek voor versie 1.1.4 voor meer informatie.
Databricks SDK voor Python bijgewerkt naar versie 0.10.0 (bèta)
3 oktober 2023
Databricks SDK voor Python-versie 0.10.0 introduceert 7 belangrijke wijzigingen, voegt 10 gegevensklassen toe, voegt 6 velden toe en voegt één service toe. Zie het wijzigingenlogboek voor versie 0.10.0 voor meer informatie.
Databricks SDK voor Go bijgewerkt naar versie 0.22.0 (bèta)
3 oktober 2023
Databricks SDK voor Go-versie 0.22.0 introduceert één belangrijke API-wijziging en voegt één API toe. Zie het wijzigingenlogboek voor versie 0.22.0 voor meer informatie.
Unity Catalogvolumes nu in openbare preview voor Azure China
2 oktober 2023
Unity Catalogvolumes zijn nu beschikbaar als een openbare preview-functie in Azure China-regio's. Zie Wat is Unity Catalogvolumes?.