Červenec 2023
Tyto funkce a vylepšení platformy Azure Databricks byly vydány v červenci 2023.
Poznámka:
Verze jsou připraveny. Váš pracovní prostor Azure Databricks se nemusí aktualizovat až do týdne nebo více po počátečním datu vydání.
Správci pracovního prostoru teď můžou vytvářet skupiny účtů.
31. července 2023
Správci pracovního prostoru teď můžou vytvářet skupiny účtů z federovaných pracovních prostorů identit. Dříve mohli správci pracovního prostoru vytvářet pouze místní skupiny pracovního prostoru. Skupiny účtů můžou mít přístup k datům v metastoru katalogu Unity a přístup k pracovním prostorům federovaným identitám. Databricks doporučuje používat skupiny účtů místo místních skupin pracovních prostorů k využití katalogu Unity a centrálního místa pro správu identity.
Viz Správa skupin účtů pomocí stránky nastavení správce pracovního prostoru.
Role správce skupin je ve verzi Public Preview.
31. července 2023
Teď můžete uživatelům Databricks, instančním objektům a skupinám udělit oprávnění ke správě skupin. Správci skupin můžou spravovat členství ve skupinách. Můžou také přiřadit další uživatele roli správce skupiny. Správci účtů mají roli správce skupin ve všech skupinách v účtu. Správci pracovního prostoru mají roli správce skupin u skupin účtů, které vytvoří.
Podívejte se, kdo může spravovat skupiny účtů?
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.202.0 (Public Preview)
27. července 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.202.0. Podrobnosti najdete v protokolu změn verze 0.202.0.
Sada Databricks SDK pro Python se aktualizovala na verzi 0.3.0 (beta verze)
27. července 2023
Sada Databricks SDK pro Python verze 0.3.0 zavádí podporu služby Zásady sítě účtů, zpracovává vnořené parametry dotazu, přidává, odebírá a vytváří různé metody, pole, třídy dat a služby a další. Podrobnosti najdete v protokolu změn verze 0.3.0.
Sada Databricks SDK for Go byla aktualizována na verzi 0.14.1 (beta verze)
27. července 2023
Sada Databricks SDK pro Go verze 0.14.1 odpovídajícím způsobem zpracovává vnořené parametry dotazu a opravuje filtrování v výpisech QueryHistory. Podrobnosti najdete v protokolu změn verze 0.14.1.
Sada Databricks SDK for Go byla aktualizována na verzi 0.14.0 (beta verze)
26. července 2023
Sada Databricks SDK pro Go verze 0.14.0 přidává podporu služby Zásady sítě účtů a přidává, odebírá a mění několik metod, polí a typů. Podrobnosti najdete v protokolu změn verze 0.14.0.
Spuštění jiné úlohy jako úlohy v úloze Azure Databricks
25. července 2023
Nový Run Job úkol můžete použít k přidání další úlohy jako úkolu do úlohy Azure Databricks, což vám umožní rozložit velký pracovní postup zpracování do několika úloh komponent nebo vytvořit opakovaně použitelné komponenty pro použití ve více úlohách. Informace o použití úlohy v uživatelském rozhraní úloh naleznete v tématu Plánování a orchestrace pracovních postupů. Informace o použití úlohy s rozhraním REST API úloh najdete v referenčních informacích k rozhraní REST API 2.1 nebo referenčních informací k rozhraní API úloh 2.0.
Aktualizace sítě pracovního prostoru získá podporu uživatelského rozhraní (GA)
24. července 2023
Dříve jste mohli použít šablonu ARM s příkazovým řádkem nebo webem Azure Portal k povolení zabezpečeného připojení ke clusteru nebo povolení služby Azure Private Link.
Teď můžete také použít uživatelské rozhraní webu Azure Portal (bez šablony) pro aktualizace sítě přímo v instanci pracovního prostoru Azure Databricks. Oba typy aktualizací sítě jsou nyní obecně dostupné.
Všichni uživatelé mají ve výchozím nastavení přístup k datovým produktům na Webu Databricks Marketplace.
24. července 2023
Od 24. července a postupné zavádění do všech oprávněných pracovních prostorů budou moct všichni uživatelé instalovat bezplatné nebo dříve zakoupené datové sady pomocí Databricks Marketplace. To je možné tím, že udělíte USE MARKETPLACE ASSETS oprávnění všem uživatelům ve všech metastorech katalogu Unity. Toto nové oprávnění nemá žádný dopad na náklady, protože všechny transakce z Marketplace probíhají mimo Databricks. Pokud chcete zakázat přístup, přečtěte si téma Zákaz přístupu z Marketplace.
Klasický režim klávesových zkratek
21. července 2023
Nové nastavení umožňuje používat funkce z nového editoru (například automatické dokončování při psaní, zvýrazňování syntaxe, formátování kódu a další) při zachování stejných známých klávesových zkratek z předchozího editoru. Pokud chcete získat přístup k tomuto nastavení, otevřete konfiguraci editoru a přepněte režim zástupců editoru poznámkových bloků na Classic (Code Mirror).
Federace Lakehouse umožňuje spouštět dotazy vůči externím poskytovatelům databází (Public Preview)
21. července 2023
Lakehouse Federation je platforma federace dotazů pro Azure Databricks, která využívá službu Unity Catalog, aby uživatelům a systémům umožňovala spouštět dotazy na více externích zdrojů dat, aniž by bylo nutné migrovat všechna data do sjednoceného systému.
Lakehouse Federation je určená pro případy použití, jako jsou:
- Ad hoc generování sestav.
- Testování konceptu.
- Průzkumná fáze nových kanálů nebo sestav ETL.
- Podpora úloh během přírůstkové migrace
V každém z těchto scénářů vám federace dotazů umožní rychleji získat přehledy, protože se můžete dotazovat na data na místě a vyhnout se složitému a časově náročnému zpracování ETL. Navíc získáte výhody rozhraní katalogu Unity a zásad správného řízení dat, včetně jemně odstupňovaného řízení přístupu, rodokmenu dat a vyhledávání.
Podívejte se , co je Federace Lakehouse?.
Přesunutí do koše povoleného pro úložiště
19. července 2023
Odstranění úložišť teď funguje stejně jako odstranění jiných prostředků pracovního prostoru. V seznamu Úložišť klikněte pravým tlačítkem na název úložiště a vyberte Přesunout do koše. Po 30 dnech se složka Koš automaticky trvale odstraní.
Viz Odstranění objektu.
Vytváření upozornění pro pomalé nebo zablokované úlohy
18. července 2023
Teď můžete nakonfigurovat očekávanou dobu trvání úlohy nebo úlohy Azure Databricks a přidat oznámení, pokud úloha nebo úkol překročí očekávanou dobu trvání. Tato funkce umožňuje dostávat upozornění na pomalé úlohy bez zrušení spuštění. Informace o konfiguraci očekávané doby trvání v uživatelském rozhraní úloh Azure Databricks najdete v tématu Konfigurace prahových hodnot pro dobu trvání spuštění úlohy nebo metriky backlogu streamování. Pokud chcete nakonfigurovat očekávanou dobu trvání pomocí rozhraní API úloh 2.1, přečtěte si téma Úlohy v referenčních informacích k rozhraní REST API.
Sada Databricks SDK for Go byla aktualizována na verzi 0.13.0 (beta verze)
18. července 2023
Sada Databricks SDK pro Go verze 0.13.0 přidává podporu ověřování spravovaných identit Azure pro operace na úrovni účtu, přidává, mění a odebírá několik metod a polí a další. Podrobnosti najdete v protokolu změn verze 0.13.0.
Sada Databricks SDK pro Python se aktualizovala na verzi 0.2.0 (beta verze)
18. července 2023
Sada Databricks SDK pro Python verze 0.2.0 přidá místní implementaci dbutils.widgets, přidá, změní a odebere několik metod, polí a tříd dat a další. Podrobnosti najdete v protokolu změn verze 0.2.0.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.201.0 (Public Preview)
18. července 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) verze 0.201.0 vylepšuje auth login prostředí, podporuje dokončování tabulátoru pro odkazování na konfigurační profily ověřování Azure Databricks, přidávání, změny a odebrání několika skupin příkazů a dalších příkazů. Podrobnosti najdete v protokolu změn verze 0.201.0.
Sada Databricks SDK pro Python se aktualizovala na verzi 0.2.1 (beta verze)
18. července 2023
Sada Databricks SDK pro Python verze 0.2.1 podporuje starší verze urllib. Podrobnosti najdete v protokolu změn verze 0.2.1.
Databricks Assistant je ve verzi Public Preview
18. července 2023
Nástroj Databricks Assistant funguje jako průvodce párem založeným na umělé inteligenci, který vám umožní efektivnější vytváření poznámkových bloků, dotazů a souborů. Pomůže vám rychle odpovědět na otázky generováním, optimalizací, dokončováním, vysvětlením a opravou kódu a dotazů. Další informace a pokyny k povolení pomocníka najdete v nejčastějších dotazech k Nástroji Databricks Assistant.
Deaktivace uživatelů a instančních objektů z vašeho účtu
13. července 2023
Teď můžete deaktivovat uživatele a instanční objekty ze svého účtu Azure Databricks. Deaktivovaný uživatel se nemůže přihlásit k účtu Azure Databricks nebo k federovaným pracovním prostorům identit. Všechna oprávnění uživatele a objekty pracovního prostoru však zůstávají beze změny. Další informace najdete v tématu Deaktivace uživatele v účtu Azure Databricks a deaktivace instančního objektu v účtu Azure Databricks.
Zřizování SCIM na úrovni účtu teď deaktivuje uživatele, když se deaktivují ve zprostředkovateli identity.
13. července 2023
Zřizování SCIM na úrovni účtu teď deaktivuje uživatele, když se deaktivují ve vašem zprostředkovateli identity. Dříve, když byl uživatel deaktivován ve zprostředkovateli identity, zřizování SCIM na úrovni účtu je odstranilo z účtu Azure Databricks. Další informace najdete v tématu Synchronizace uživatelů a skupin z Microsoft Entra ID a Deaktivace uživatele v účtu Azure Databricks.
Přístup správce adresáře koše
13. července 2023
Správci pracovních prostorů teď mají přístup k adresářům koše jiných uživatelů.
Prevence vykreslování stránek útoku typu MIME a vykreslování stránek útoku XSS je teď vždy povolené.
12. července 2023
Azure Databricks snižuje riziko vykreslování stránek útoku TYPU MIME a vykreslování stránek útoku XSS přidáním odpovídajících hlaviček HTTP. Tyto funkce byly ve výchozím nastavení povolené a dříve je možné je zakázat. Kvůli lepšímu zabezpečení teď Azure Databricks vždy umožňuje obě funkce a už nejsou k dispozici nastavení správce pracovního prostoru, která by je zakázala. U pracovních prostorů, které dříve zakázaly jednu nebo obě tyto funkce, jsou teď obě funkce povolené.
Svazky katalogu Unity jsou ve verzi Public Preview.
12. července 2023
Svazky v katalogu Unity teď můžete použít ke správě přístupu k umístěním cloudového úložiště objektů v Databricks Runtime 13.2 a vyšší. Svazky poskytují možnosti pro přístup k souborům, jejich ukládání, řízení a uspořádání. Podívejte se, co jsou svazky katalogu Unity?
Zjednodušené prostředí pro odesílání zpětné vazby k produktům z pracovního prostoru
11. července 2023
Teď je jednodušší odeslat zpětnou vazbu k produktům z vašeho pracovního prostoru. Můžete odeslat zpětnou vazbu a připojit snímky obrazovky s menším počtem kroků a bez opuštění uživatelského rozhraní pracovního prostoru. Další informace najdete v tématu Odeslání zpětné vazby k produktu.
Rozšíření Databricks pro Visual Studio Code se aktualizovalo na verzi 1.1.0
10. července 2023
Rozšíření Databricks pro Visual Studio Code verze 1.1.0 ve výchozím nastavení umožňuje integraci Databricks Connect, přidává experimentální funkce pro poznámkové bloky Jupyter a další. Podrobnosti najdete v protokolu změn verze 1.1.0.
Funkce se teď zobrazují v Průzkumníku katalogu (Public Preview)
10. července 2023
Uživatelem definované funkce SQL a Pythonu se teď zobrazují v Průzkumníku katalogu. Pomocí tohoto nového uživatelského rozhraní můžete zobrazit podrobnosti o funkci a spravovat oprávnění.
Poskytovatel Terraformu databricks aktualizoval na verzi 1.21.0
7. července 2023
Zprostředkovatel Terraformu databricks verze 1.21.0 přidává podporu pro předplatná v řídicích panelech a úlohách SQL výstrah databricks_job, definuje obecné datové nástroje Azure Databricks pro definování zdrojů dat na úrovni pracovního prostoru a účtů a další. Podrobnosti najdete v protokolu změn verze 1.21.0.
Maximální posun požadavků List all jobsList job runs rozhraní API je teď omezený.
6. července 2023
Maximální posun, který můžete zadat v List all jobs rozhraní API úloh a List job runs požadavky, je nyní omezen. Pokud chcete zabránit tomuto limitu při použití těchto požadavků, použijte stránkování založené na tokenech, které tento limit nemá. Viz GET /api/2.1/jobs/list a GET /api/2.1/jobs/runs/list v referenčních informacích k rozhraní REST API.
Databricks Runtime 13.2 je obecná dostupnost
6. července 2023
Databricks Runtime 13.2 a Databricks Runtime 13.2 ML jsou nyní obecně dostupné.
Viz Databricks Runtime 13.2 (EoS) a Databricks Runtime 13.2 pro Machine Learning (EoS)
Rozdílové sdílení a Sdílení v Databricks Marketplace podporují sdílení zobrazení (Public Preview)
6. července 2023
Teď můžete sdílet zobrazení na Delta Sharing a Databricks Marketplace. Viz Přidání zobrazení do sdílené složky.
Inicializační skripty v DBFS do konce životnosti 1. září 2023
5. července 2023
1. září 2023 dosáhne konce životnosti podpory inicializačních skriptů v DBFS a funkce už nebude fungovat. Uložte inicializační skripty do souborů pracovního prostoru, abyste zajistili, že budou fungovat i po 1. září 2023.