2021. květen
Tyto funkce a vylepšení platformy Azure Databricks byly vydány v květnu 2021.
Poznámka:
Verze jsou připraveny. Váš účet Azure Databricks se nemusí aktualizovat až do týdne nebo více po počátečním datu vydání.
Databricks Mosaic AI: nativní data a řešení pro spolupráci pro celý životní cyklus ML
27. května 2021
Nová osoba služby Machine Learning, která se dá vybrat na bočním panelu uživatelského rozhraní Azure Databricks, umožňuje snadný přístup k novému účelu vytvořenému prostředí pro ML, včetně registru modelů a čtyř nových funkcí ve verzi Public Preview:
- Nová stránka řídicího panelu s pohodlnými prostředky, posledními a úvodními odkazy
- Nová stránka Experimenty, která centralizuje zjišťování a správu experimentů.
- AutoML – způsob automatického generate modelů ML z dat a zrychlení cesty k produkčnímu prostředí.
- úložiště funkcí, způsob, jak catalog spravovat funkce ML a zpřístupnit je pro trénování a nasazení, což zvyšuje znovupoužití. Pomocí vyhledávání funkcí založených na rodokmenu dat, které využívá automaticky protokolované zdroje dat, můžete zpřístupnit funkce pro trénování a obsluhu se zjednodušeným nasazením modelu, které nevyžadují změny klientské aplikace.
Podrobnosti najdete v tématu AI a strojové učení v Databricks.
SQL Analytics se přejmenuje na Databricks SQL
27. května 2021
SQL Analytics se přejmenuje na Databricks SQL. Další podrobnosti najdete v poznámkě k verzi SQL pro Databricks.
Vytváření a správa kanálů ETL pomocí delta live Tables (Public Preview)
26. května 2021
Databricks s radostí představuje Delta Live Tables, cloudovou službu, která umožňuje jednoduchý, spolehlivý a škálovatelný vývoj extrakce, transformace a načítání (ETL). Delta Live Tables:
- Poskytuje intuitivní a známé deklarativní rozhraní pro kanály sestavení.
- Umožňuje monitorovat kanály zpracování dat, vizualizovat závislosti a spravovat kanály a závislosti v různých prostředích.
- Umožňuje vývoj řízený testy, vynucování omezení kvality dat a použití zásad jednotného zpracování chyb dat.
- Automatizuje nasazení kanálů zpracování dat, abyste mohli snadno upgradovat, vrátit zpět a přírůstkově znovu zpracovat data.
Podrobnosti viz Co je Delta Live Tables?.
Spotové virtuální počítače Azure jsou obecně dostupné
24. května 2021
Možnost vytvářet clustery Azure Databricks pomocí spotových virtuálních počítačů Azure je teď obecně dostupná. Teď můžete get výhody výrazně nižších nákladů na spotové instance Azure a snížit celkové náklady na vlastnictví Azure Databricks. Spotové instance Azure můžete použít v těchto případech:
- Pomocí uživatelského rozhraní vytvořte cluster a zaškrtněte políčko Spotové instance.
- Pomocí rozhraní API vytvořte cluster a zadejte
azure_attributes
pole v atributech clusteru požadavku. - Pomocí uživatelského rozhraní vytvořte fond instancí a vyberte možnost Vše na místě .
- Pomocí rozhraní API vytvořte fond instancí a zadejte
azure_attributes
pole v požadavku na vytvoření fondu instancí.
Šifrování dotazů SQL Databricks a historie dotazů pomocí vlastního klíče (Public Preview)
20. května 2021
Podrobnosti najdete v poznámkách k verzi SQL pro Databricks.
Zvýšení limit pro počet ukončených univerzálních clusterů
18. května 2021: Verze 3.46
V pracovním prostoru Azure Databricks teď můžete mít až 150 ukončených clusterů pro všechny účely. Dříve bylo limit 120. Podrobnosti najdete v tématu Ukončení výpočetních prostředků. limit počtu ukončených clusterů pro všechny účely vrácených rozhraním API clusterů je nyní také 150.
Zvýšení limit pro počet připnutých clusterů
18. května 2021: Verze 3.46
V pracovním prostoru Azure Databricks teď můžete mít až 70 připnutých clusterů. Dříve byla hodnota limit 50. Podrobnosti najdete v tématu Připnutí výpočetních prostředků.
Spravování výsledků z poznámkového bloku where se ukládá (Veřejná ukázka)
18. května 2021: Verze 3.46
Teď se můžete rozhodnout uložit všechny výsledky poznámkového bloku do kořenové instance Azure Storage bez ohledu na velikost nebo typ spuštění. Ve výchozím nastavení jsou některé výsledky interaktivních poznámkových bloků uložené v Azure Databricks. Nová konfigurace umožňuje ukládat je do kořenové instance Azure Storage ve vašem vlastním účtu. Podrobnosti najdete v tématu Konfigurace umístění úložiště výsledků poznámkového bloku.
Tato funkce nemá žádný vliv na spouštění poznámkových bloků jako úloh, jejichž výsledky jsou vždy uložené v kořenové instanci Azure Storage.
Šifrování poznámkových bloků a tajných dat v řídicí rovině pomocí vlastního klíče (Public Preview)
10. května 2021
Pracovní prostor Azure Databricks se skládá z řídicí roviny hostované v předplatném spravovaném službou Azure Databricks a výpočetní roviny nasazené ve vašem předplatném Azure. Řídicí rovina ukládá data spravovaných služeb, která zahrnují příkazy poznámkového bloku, tajné kódy a další konfigurační data pracovního prostoru. Ve výchozím nastavení se tato data šifrují pomocí klíče spravovaného službou Azure Databricks, ale teď můžete přidat klíč z instance služby Azure Key Vault, abyste tato data zašifrovali. Viz Povolení klíčů spravovaných zákazníkem pro spravované služby.
Konec podpory řady Databricks Runtime 7.4
3. května 2021
Podpora pro Databricks Runtime 7.4, Databricks Runtime 7.4 pro Machine Learning a Databricks Runtime 7.4 pro Genomics skončila 3. května. Viz životní cyklus podpory Databricks.
Uživatelé úložišť teď můžou integrovat s Azure DevOps pomocí tokenů patového přístupu.
3.10. května 2021: Verze 3.45
Kromě přístupových tokenů Microsoft Entra ID teď můžete k ověřování pomocí Azure DevOps použít osobní přístupový token. Podrobnosti najdete v Set v repozitářích Gitu Databricks.