Září 2023
Tyto funkce a vylepšení platformy Azure Databricks byly vydány v září 2023.
Poznámka:
Verze jsou připraveny. Váš pracovní prostor Azure Databricks se nemusí aktualizovat až do týdne nebo více po počátečním datu vydání.
Federace Lakehouse dostupná v clusterech s jedním uživatelem
29. září 2023
Lakehouse Federation je teď k dispozici v clusterech s jedním uživatelem pomocí Databricks Runtime 13.1 a novějších. Dotazy na federované katalogy může spouštět pouze vlastník připojení. Podívejte se , co je Federace Lakehouse?.
Delegování možnosti vytvoření přihlašovacích údajů úložiště v katalogu Unity
29. září 2023
Teď můžete uživatelům udělit oprávnění k vytvoření přihlašovacích údajů úložiště v metastoru katalogu Unity pomocí nového CREATE STORAGE CREDENTIAL
oprávnění. Viz CREATE STORAGE CREDENTIAL.
Databricks Runtime 14.1 (beta verze)
28. září 2023
Databricks Runtime 14.1 a Databricks Runtime 14.1 ML jsou nyní k dispozici jako beta verze.
Viz Databricks Runtime 14.1 a Databricks Runtime 14.1 pro Machine Learning.
Model GPU, který slouží optimalizovaným pro LLMs ve verzi Public Preview
28. září 2023
Model obsluhující v Azure Databricks podporuje nasazení modelů PyTorch a TensorFlow pomocí výpočetních prostředků GPU. Tato funkce je ve verzi Public Preview ve vybraných oblastech a vztahuje se také na nasazení modelů přihlášených pomocí mlflow.pyfunc
, mlflow.pytorch
, mlflow.tensorflow
a mlflow.transformers
příchutí. Podívejte se na typy úloh GPU.
Tato verze Preview také zahrnuje podporu nasazení GPU optimalizovaného pro obsluhu velkých jazykových modelů. Viz obsluha optimalizovaného rozsáhlého jazykového modelu (LLM).
Zabránění vynechání spuštění úlohy při dosažení limitů souběžnosti
27. září 2023 – 2. října 2023
Pokud chcete zabránit vynechání spuštění úlohy Azure Databricks z důvodu limitů souběžnosti, můžete u úlohy povolit zařazování do fronty. Pokud je povoleno zařazení do fronty, pokud dosáhnete limitu souběžnosti, úloha se umístí do fronty, dokud nebude kapacita k dispozici ke spuštění úlohy. Viz Povolení zařadování do fronty spuštění úloh.
Poskytovatel Terraformu databricks aktualizoval na verzi 1.27.0
27. září 2023
Zprostředkovatel Terraformu databricks verze 1.27.0 přidává owner
a přidávádatabricks_metastore_data_access
, force_destroy
obsahuje několik dalších vylepšení a oprav chyb a další. Podrobnosti najdete v protokolu změn verze 1.27.0.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.206.0 (Public Preview)
27. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.206.0. Tato verze umožňuje přepsání cílů pro clustery kanálů v sadách prostředků Databricks, zlepšuje prostředí inicializace šablony sady a další. Podrobnosti najdete v protokolu změn verze 0.206.0.
Sada Databricks SDK for Go byla aktualizována na verzi 0.21.0 (beta verze)
27. září 2023
Sada Databricks SDK pro Go verze 0.21.0 zavádí více než desítku zásadních změn rozhraní API, přidává více než desítku rozhraní API a přidává desítky polí. Podrobnosti najdete v protokolu změn verze 0.21.0.
Tabulky odvozování pro koncové body obsluhující model je Ve verzi Public Preview.
26. září 2023
Povolte tabulky odvozování v modelu, které obsluhují koncové body, aby zachytily příchozí požadavky a odchozí odpovědi na tyto koncové body a protokolovaly je jako tabulku Unity Catalog Delta. Data v této tabulce pak můžete použít k monitorování, ladění a vylepšování modelů ML. Viz Tabulky odvozování pro monitorování a ladění modelů.
Pokud se chcete zaregistrovat ve verzi Public Preview, obraťte se na svůj tým účtů Azure Databricks.
Ovladač ODBC Databricks 2.7.5
23. září 2023
Vydali jsme verzi 2.7.5 ovladače ODBC Databricks (stáhnout). Tato verze přidává následující nové funkce a vylepšení:
- Vylepšení ověřování klientů OAuth 2.0 a podpora zjišťování koncových bodů OIDC
- Šifrování na straně serveru s klíči poskytnutými zákazníkem
- Funkce Timedate
- Vylepšené zasílání chybových zpráv pro cloudové načítání
- Aktualizace zabezpečení.
Tato verze také řeší následující regresi ve verzi 2.7.3:
- Funkce
SQLForeignKeys
vrátí prázdný výsledek, pokud volající předáNULL
hodnotu pro katalog primární tabulky nebo cizí tabulky.
Verze 2.7.5 nyní vrátí všechny primární klíče nebo cizí klíče přidružené ke související tabulce, pokud je nastaven NULL
katalog druhé tabulky .
Rozšíření Databricks pro Visual Studio Code se aktualizovalo na verzi 1.1.3
21. září 2023
Rozšíření Databricks pro Visual Studio Code verze 1.1.3 přidává několik dílčích oprav. Podrobnosti najdete v protokolu změn verze 1.1.3.
Spuštění úloh jako instančního objektu je obecná dostupnost
21. září 2023
Role instančních objektů a nastavení úlohy pro spouštění úloh pomocí identity instančního objektu je teď obecně dostupná.
Viz Role pro správu instančních objektů a konfigurace identity pro spuštění úloh.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.205.2 (Public Preview)
21. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.205.2. Tato verze obsahuje několik dílčích aktualizací. Podrobnosti najdete v protokolu změn verze 0.205.2.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.205.1 (Public Preview)
20. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.205.1. Tato verze umožňuje přepsání cílů pro úlohy v sadách prostředků Databricks a další. Podrobnosti najdete v protokolu změn verze 0.205.1.
Sada Databricks SDK for Go byla aktualizována na verzi 0.20.0 (beta verze)
20. září 2023
Sada Databricks SDK pro Go verze 0.20.0 přidává více než desítky rozhraní API, přidává půl desítek polí, mění několik polí a metod a odebere několik rozhraní API. Podrobnosti najdete v protokolu změn verze 0.20.0.
Sada Databricks SDK pro Python se aktualizovala na verzi 0.9.0 (beta verze)
20. září 2023
Sada Databricks SDK pro Python verze 0.9.0 mění několik metod a polí, přidává přibližně 10 polí, přidává přibližně 20 tříd dat a zavádí další změny a odebrání. Podrobnosti najdete v protokolu změn verze 0.9.0.
Sada Databricks SDK pro Python se aktualizovala na verzi 0.7.1 (beta verze)
20. září 2023
Sada Databricks SDK pro Python verze 0.7.1 obsahuje dílčí opravu ke zlepšení výkonu stahování souborů. Podrobnosti najdete v protokolu změn verze 0.7.1.
Zprostředkovatel Terraformu Databricks se aktualizoval na verzi 1.26.0
20. září 2023
Zprostředkovatel Databricks Terraform verze 1.26.0 přidává podporu inicializačních skriptů ze svazků katalogu Unity, obsahuje několik dalších vylepšení a oprav chyb a další. Podrobnosti najdete v protokolu změn verze 1.26.0.
Databricks Connect pro Databricks Runtime 14.0
20. září 2023
Databricks Connect pro Databricks Runtime 14.0 podporuje úplné strukturované streamování (včetně foreachBatch
) a dlouhotrvající dotazy, které se po přerušení znovu připojují k dotazu.
Řídicí panely Lakeview ve verzi Public Preview
20. září 2023
Řídicí panely Lakeview umožňují sdílet vizualizace a datové sady pomocí zjednodušeného a sjednoceného modelu zásad správného řízení dat. Viz řídicí panely.
Databricks Connect V2 je verze Public Preview pro Scala
19. září 2023
Databricks Connect pro Databricks Runtime 13.3 LTS teď podporuje Scala ve verzi Public Preview, včetně datových rámců, delta, strukturovaného streamování a dalších.
V Pythonu se teď podporuje zrušení dotazů a DatabricksSession
třída se teď dá použít v poznámkových blocích a úlohách Azure Databricks.
Model GPU obsluhující ve verzi Public Preview
19. září 2023
Model obsluhující v Azure Databricks podporuje nasazení modelů PyTorch a TensorFlow pomocí výpočetních prostředků GPU. Tato funkce je ve verzi [Public Preview] ve vybraných oblastech a vztahuje se také na nasazení modelů přihlášených pomocí mlflow.pyfunc
mlflow.pytorch
, , mlflow.tensorflow
a mlflow.transformers
příchutí. Podívejte se na typy úloh GPU.
Výpočet funkcí na vyžádání je nyní k dispozici v katalogu Unity (Public Preview)
14. září 2023
Funkce strojového učení se teď dají vypočítat na vyžádání v době odvozu. Všechna výpočetní logika, modely a data funkcí se řídí katalogem Unity. To umožňuje modelům výpočetní funkce pomocí vstupů, které jsou k dispozici pouze v době odvozování, jako je aktuální umístění uživatele. Další informace najdete v tématu Výpočetní funkce na vyžádání pomocí uživatelem definovaných funkcí Pythonu.
Databricks Runtime 14.0 je obecná dostupnost
14. září 2023
Databricks Runtime 14.0 a Databricks Runtime 14.0 ML jsou nyní obecně dostupné.
Viz Databricks Runtime 14.0 (EoS) a Databricks Runtime 14.0 pro Machine Learning (EoS).
Upgrade e-mailových oznámení účtu
14. září 2023
Databricks už neodesílá e-mailová oznámení, když se uživatelé přidají do účtu Azure Databricks. Uživatelé budou i nadále dostávat e-mailová oznámení, když jim udělíte přístup k pracovnímu prostoru.
Poskytovatel Terraformu Databricks aktualizoval na verzi 1.25.1
13. září 2023
Poskytovatel Databricks Terraform verze 1.25.1 byl vydán s drobnými vylepšeními a opravami chyb. Podrobnosti najdete v protokolu změn verze 1.25.1.
Sada Databricks SDK for Go byla aktualizována na verzi 0.19.2 (beta verze)
13. září 2023
Sada Databricks SDK pro Go verze 0.19.2 obsahuje jednu dílčí opravu. Podrobnosti najdete v protokolu změn verze 0.19.2.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.205.0 (Public Preview)
13. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.205.0. Toto je první verze rozhraní příkazového řádku Databricks, která podporuje sady prostředků Databricks ve verzi Public Preview. Podrobnosti najdete v protokolu změn verze 0.205.0.
Rezervované umístění pro /Workspace
13. září 2023
Umístění /Workspace
je teď rezervované. Adresář pojmenovaný /Workspace
vzhledem ke kořenové cestě v Azure Databricks už nemůžete definovat.
Sady prostředků Databricks (Public Preview)
12. září 2023
Sady prostředků Databricks, které jsou teď ve verzi Public Preview, umožňují vyjádřit kompletní data, analýzy a projekty ML jako kolekci zdrojových souborů. To usnadňuje použití osvědčených postupů přípravy dat, jako je správa zdrojového kódu, kontrola kódu, testování a CI/CD.
Poskytovatel Terraformu databricks aktualizoval na verzi 1.25.0
12. září 2023
Poskytovatel Databricks Terraform verze 1.25.0 zahrnuje přidání IS_OWNER
oprávnění pro datové sklady SQL Databricks, dílčí opravy, aktualizace dokumentace a další. Podrobnosti najdete v protokolu změn verze 1.25.0.
Rozšíření Databricks pro Visual Studio Code se aktualizovalo na verzi 1.1.2
12. září 2023
Rozšíření Databricks pro Visual Studio Code verze 1.1.2 přidává experimentální podporu %run
# MAGIC
pro poznámkové bloky Azure Databricks, řeší problémy s cestami s několika místními instalacemi Rozhraní příkazového řádku Databricks a další. Podrobnosti najdete v protokolu změn verze 1.1.2.
Partner Connect podporuje Snowplow
12. září 2023
K připojení pracovního prostoru Azure Databricks ke Snowplowu teď můžete použít Partner Connect. Další informace najdete v tématu Připojení ke Snowplowu.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.204.1 (Public Preview)
11. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.204.1. Podrobnosti najdete v protokolu změn verze 0.204.1.
Filtrování citlivých dat pomocí filtrů řádků a masek sloupců (Public Preview)
11. září 2023
Teď můžete u tabulek použít filtry řádků a masky sloupců, abyste zabránili přístupu k citlivým datům určitými uživateli. Tyto filtry a masky se implementují jako uživatelem definované funkce SQL (UDF). Viz Filtrování citlivých dat tabulky pomocí filtrů řádků a masek sloupců.
Systémové tabulky teď obsahují schéma Marketplace (Public Preview)
8. září 2023
Systémové tabulky teď obsahují marketplace
schéma, které ukládá data zprostředkovatele Marketplace. Dotazem na marketplace.listing_access_events
tabulku můžete načíst informace o spotřebiteli pro akce provedené ve výpisech. Další informace najdete v referenčních informacích k systémovým tabulkám Marketplace.
Tabulka cenových systémů je nyní dostupná (Public Preview)
8. září 2023
Systémové tabulky teď obsahují cenovou tabulku (system.billing.list_prices
), kde můžete monitorovat náklady na skladovou položku v průběhu času. Tyto protokoly vám můžou pomoct s analýzou nákladů a monitorováním změn cen. Viz referenční informace k tabulce cenových systémů.
Sada Databricks SDK for Go byla aktualizována na verzi 0.19.1 (beta verze)
7. září 2023
Sada Databricks SDK pro Go verze 0.19.1 pokračuje v několika dílčích aktualizacích a opravách. Podrobnosti najdete v protokolu změn verze 0.19.1.
Ovladač ODBC Databricks 2.7.3
7. září 2023
Vydali jsme verzi 2.7.3 ovladače ODBC Databricks (stáhnout). Tato verze obsahuje následující funkce a opravy:
- Opravy ohrožení zabezpečení upgradem závislostí třetích stran
SQL_ATTR_MAX_ROWS
podpora, která umožňuje klientovi omezit počet řádků, které se mají načíst v dotazu, aby se urychlilo rychlé načítání (například Preview).- Aktualizace podpory pro MacOS Ovladač teď podporuje Apple Silicon/M1.
- Podpora ověřování založené na prohlížeči OAuth2 pro usnadnění jednotného přihlašování
Důležité
Pokud používáte rozhraní API primárního a cizího klíče, vrátí funkce prázdný výsledek, SQLForeignKeys
pokud volající předá NULL
hodnotu pro katalog primární tabulky nebo cizí tabulky. Tento problém je známý vývojářům.
Rozhraní příkazového řádku Databricks se aktualizovalo na verzi 0.204.0 (Public Preview)
6. září 2023
Rozhraní příkazového řádku Databricks (Databricks CLI) bylo aktualizováno na verzi 0.204.0. Tato verze zahrnuje seskupení příkazů souvisejících s oprávněními, přidání a změny několika příkazů a další. Podrobnosti najdete v protokolu změn verze 0.204.0.
Průzkumník dat je teď Průzkumník katalogu.
6. září 2023
Průzkumník dat se přejmenuje na Průzkumníka katalogu, aby rozpoznal fakt, že ho můžete použít k práci se všemi zabezpečitelnými objekty v katalogu Unity, nejen s datovými objekty. Podívejte se, co je Průzkumník katalogu?
Sada Databricks SDK for Go byla aktualizována na verzi 0.19.0 (beta verze)
4. září 2023
Sada Databricks SDK pro Go verze 0.19.0 přejmenuje rozhraní API pro oprávnění, přidává 8 rozhraní API, přidává 5 polí, mění a odebírá několik polí a mění několik metod. Podrobnosti najdete v protokolu změn verze 0.19.0.
Sada Databricks SDK pro Python se aktualizovala na verzi 0.8.0 (beta verze)
4. září 2023
Sada Databricks SDK pro Python verze 0.8.0 přejmenuje rozhraní API pro oprávnění, přidává půl tuctu polí, přidává půl tuctu tříd dat a zavádí několik změn a odebrání. Podrobnosti najdete v protokolu změn verze 0.8.0.
Delegování oprávnění seznamu povolených v katalogu Unity
1. září 2023
Teď můžete delegovat oprávnění pro správu položek v seznamu povolených položek pro Katalog Unity. Viz Knihovny allowlist a inicializační skripty pro sdílené výpočetní prostředky.
Integrace aplikací GitHubu v Úložištích je obecná dostupnost
1. září 2023
Integrace aplikací GitHubu v Úložištích je obecná dostupnost. Tato funkce umožňuje jednodušší správu přihlašovacích údajů Gitu při integraci s GitHubem v úložištích.
Důležité
Aplikace GitHubu se na GitHub Enterprise Serveru nepodporují.