2022. únor
Tyto funkce a vylepšení platformy Azure Databricks byly vydány v únoru 2022.
Poznámka:
Verze jsou připraveny. Váš účet Azure Databricks se nemusí aktualizovat až do týdne nebo více po počátečním datu vydání.
Jednodušší plánování datových toků pro Delta Live Tables (Veřejná ukázka)
28. února – 2. března 2022
Teď můžete vytvořit naplánovanou úlohu Azure Databricks pro aktivované kanály přímo z uživatelského rozhraní Delta Live Tables. Dříve jste potřebovali vytvořit úlohu a plán pro spuštění úlohy z uživatelského rozhraní úloh.
Snadno si prohlédněte historii aktualizací pracovních procesů Delta Live Tables (Public Preview)
28. února – 2. března 2022
Nyní můžete zobrazit historii aktualizací kanálů, včetně stavu aktualizace, podrobností a událostí, pomocí rozevíracího seznamu Historie aktualizací v uživatelském rozhraní Delta Live Tables.
Ujistěte se, že žádost o idempotenci úlohy pro spuštění rozhraní API úloh
22. února 2022: Verze 3.66
Teď můžete použít volitelný idempotency_token parametr s operací Spustit rozhraní API úloh, abyste zajistili, že se spustí právě jeden spuštění úlohy. Odesílání více Run now žádostí pro stejnou úlohu dříve mohlo být spuštěno více než jedno spuštění.
Další informace o idempotenci úlohy najdete v tématu Jak zajistit idempotenci úloh.
Vylepšení stability a škálovatelnosti služby Úloh
22. února 2022: Verze 3.66
Následující změny zvyšují stabilitu a škálovatelnost služby Úlohy:
- Každá nová úloha má přiřazený delší, jedinečný, číselný, nesekvenční identifikátor. Klienti, kteří používají rozhraní API úloh a spoléhají na pevnou délku identifikátoru nebo na sekvenční či monotonicky se zvyšující identifikátory, musí být upraveni, aby přijímali identifikátory, které jsou delší, nesekvenční a neuspořádané. Typ identifikátoru
int64zůstává beze změny a kompatibilita je zachována pro klienty, kteří používají IEEE 754 64bitová čísla s plovoucí desetinnou čárkou, například pro klienty JavaScriptu. - Hodnota pole
number_in_job, které je součástí odpovědi na některé požadavky rozhraní API úloh, je nyní nastavena na stejnou hodnotu jakorun_id.
Porovnání spuštění MLflow z různých experimentů
22. února 2022: Verze 3.66
Teď můžete zobrazit a porovnat spuštění z několika experimentů. Viz Porovnání spuštění z více experimentů.
Vylepšení zobrazení běhů porovnání MLflow
22. února 2022: Verze 3.66
Zobrazení porovnávaného spuštění bylo vylepšeno. Vizualizace se teď zobrazují v horní části stránky. Nyní můžete procházet nebo sbalit tabulky, které zobrazují informace o spuštění, parametry a metriky. Zobrazení teď můžete také zjednodušit skrytím parametrů a metrik, které se v různých spuštěních neliší.
Informace o stránce porovnávané spuštění naleznete v tématu Porovnání spuštění. Pokyny k porovnání spuštění najdete v tématu Porovnání spuštění.
Vylepšená viditelnost vlastníků spuštění úloh v uživatelském rozhraní clusterů
22. února 2022: Verze 3.66
Karta Clustery úloh v uživatelském rozhraní výpočetních prostředků byla aktualizována, aby se místo vlastníka úlohy zobrazila úloha spuštěná jako uživatel. Tato aktualizace je založená na změnách modelu oprávnění úloh a poskytuje lepší přehled o vlastníkovi spuštění úlohy. Viz Zobrazení výpočetních prostředků.
Přetažení sloupců datové sady v AutoML
22. února 2022: Verze 3.66
V Databricks Runtime 10.3 ML a novějších pro problémy s klasifikací a regresí teď můžete zadat sloupce v datové sadě, kterou AutoML nemá použít pro trénování. Viz referenční informace k rozhraní Python API pro AutoML.
Stránka Experimenty je obecná dostupnost
22. února 2022: Verze 3.66
Stránka experimentů je teď obecně dostupná.
Podpora dočasných tabulek v rozhraní Pythonu Delta Live Tables
22. února 2022: Verze 3.66
Vlastnost temporary teď můžete použít při deklarování tabulek pomocí rozhraní Pythonu Delta Live Tables. Definování dočasné tabulky dává Delta Live Tables pokyn, aby neuchovávaly metadata pro tabulku a zabránily publikování tabulky, když je nakonfigurováno nastavení target. Podívejte se na specifikaci Pythonu pro informace o definování tabulek Pythonu.
Vylepšení uživatelského rozhraní pro dynamické tabulky Delta (Public Preview)
22. února 2022: Verze 3.66
Tato verze zahrnuje následující vylepšení uživatelského rozhraní Delta Live Tables:
- Teď můžete upravit nastavení datového toku v dialogovém okně Nastavení v Delta Live Tables, které poskytuje uživatelsky přívětivější rozhraní. Dříve jste byli omezeni na změnu nastavení úpravou specifikace JSON. Pokud chcete vybrat uživatelské rozhraní nebo zobrazení JSON pro úpravu nastavení pipeline, klikněte na tlačítko UI nebo JSON v dialogovém okně nastavení.
- Protokol událostí na stránce Podrobnosti kanálu teď zvýrazňuje záznamy chyb, což usnadňuje identifikaci a řešení chyb v kanálech.
- Zobrazení průběhu spuštěných kanálů bylo vylepšeno. Když teď zobrazíte graf kanálu, uzly ve
RUNNINGstavu mají animovaný příchozí okraj a animované horní ohraničení.
Konec podpory řady Databricks Runtime 9.0
17. února 2022
Podpora pro Databricks Runtime 9.0 a Databricks Runtime 9.0 pro Machine Learning skončila 17. února. Viz životní cyklus podpory Databricks.
aktualizace vstupní stránky Datová Věda a technického inženýrství
10. února 2022
Aktualizovali jsme vzhled a chování cílové stránky Datová Věda & Engineering. Některé odkazy se změnily, ale neexistují žádné další změny funkcí.
Databricks Repos teď podporuje integraci AWS CodeCommit pro Git.
7. února 2022: Verze 3.65
Teď můžete používat úložiště AWS CodeCommit s úložišti Databricks Repos.
Vylepšená vizualizace pro kanály Delta Live Tables (Public Preview)
7. února 2022: Verze 3.65
Vizualizace DAG kanálu je přepracovaná tak, aby se zlepšila použitelnost a navigace. Mezi vylepšení patří změna zobrazení grafů zleva doprava místo shora dolů a poskytuje intuitivnější zobrazení provádění kanálu.
Aktualizovaný analyzátor Markdownu
7. února 2022: Verze 3.65
Analyzátor Markdownu použitý v poznámkových blocích Azure Databricks byl aktualizován. Některé problémy uvedené v předchozí aktualizaci byly opraveny. Konkrétně už není nutné umístit mezeru mezi hashtagy a textem nadpisu a odkazy s mezerami se teď vykreslují správně.
Delta Live Tables teď podporují zpracování zachytávání změn dat (Public Preview)
7. února 2022: Verze 3.65
Nyní můžete implementovat zpracování zachytávání dat změn (CDC) v rámci Delta Live Tables. Zpracování CDC se podporuje s rozhraními SQL a Pythonu. Viz rozhraní API APPLY CHANGES: Zjednodušení zachytávání změnových dat pomocí Delta Live Tables.
Další metastory jsou teď dostupné ve více oblastech.
8. února 2022
V následujících oblastech jsou nyní k dispozici následující metastory:
brazilsouth:
consolidated-brazilsouth-prod-metastore.mysql.database.azure.com
centralus:
consolidated-centralus-prod-metastore-addl-2.mysql.database.azure.comconsolidated-centralus-prod-metastore-addl-3.mysql.database.azure.com
eastus:
consolidated-eastus-prod-metastore-addl-2.mysql.database.azure.comconsolidated-eastus-prod-metastore-addl-3.mysql.database.azure.comconsolidated-eastus-prod-metastore-addl-4.mysql.database.azure.com
eastus2
consolidated-eastus2-prod-metastore-addl-2.mysql.database.azure.comconsolidated-eastus2-prod-metastore-addl-3.mysql.database.azure.com
francecentral
consolidated-francecentral-prod-metastore.mysql.database.azure.com
northeurope
consolidated-northeurope-prod-metastore-addl-2.mysql.database.azure.comconsolidated-northeurope-prod-metastore-addl-3.mysql.database.azure.com
southeastasia
consolidated-southeastasia-prod-metastore-addl-1.mysql.database.azure.com
switzerlandnorth
consolidated-switzerlandnorth-prod-metastore-0.mysql.database.azure.com
switzerlandwest
consolidated-switzerlandwest-prod-metastore-0.mysql.database.azure.com
uksouth
consolidated-uksouth-prod-metastore-addl-1.mysql.database.azure.com
westeurope
consolidated-westeurope-prod-metastore-addl-2.mysql.database.azure.comconsolidated-westeurope-prod-metastore-addl-3.mysql.database.azure.com
Vždy byste měli zahrnout všechny relevantní názvy hostitelů pro každou oblast, kterou používáte v trasách definovaných uživatelem .UDR. Viz Nastavení trasy definované uživatelem pro Azure Databricks.
Výběr architektur algoritmů pro použití s AutoML
7. února 2022: Verze 3.65
Ve službě Databricks Runtime 10.3 ML a novějších můžete zadat architektury algoritmů, jako je scikit-learn, které by AutoML nemělo brát v úvahu při vývoji modelů. AutoML ve výchozím nastavení považuje modely ze scikit-learn, XGBoost a LightGBM za problémy klasifikace a regrese a od Proroka a Auto-ARIMA pro prognózování problémů. Viz referenční informace k rozhraní Python API pro AutoML.
Modely MLflow hostované službou Databricks teď můžou vyhledávat funkce z online obchodů.
3. února 2022
Modely zabalené s metadaty úložiště funkcí můžou automaticky vyhledávat hodnoty funkcí z online obchodů při obsluhování.
Databricks Runtime 10.3 a 10.3 ML jsou ga; 10.3 Photon je Public Preview
2. února 2022
Databricks Runtime 10.3 a Databricks Runtime 10.3 ML jsou nyní obecně dostupné. Databricks Runtime 10.3 Photon je ve verzi Public Preview.