Stručný průvodce k vytváření výpočetní úlohy
Cílem tohoto článku je poskytnout jasné a odborné pokyny pro proces vytváření výpočetních prostředků. Pomocí správných typů výpočetních prostředků pro váš pracovní postup můžete zvýšit výkon a ušetřit náklady.
Osvědčený postup | Dopad | Dokumenty |
---|---|---|
Pokud s Azure Databricks začínáte, začněte používáním obecných typů instancí pro všechny účely. | Výběr vhodného typu instance pro úlohu má za následek vyšší efektivitu. | |
Pokud vaše požadovaná funkce není podporována, použijte standardní režim přístupu. | Výpočetní prostředky se standardním režimem přístupu můžou používat více uživatelů s izolací dat mezi uživateli. | |
Pokud je k dispozici dostatek dostupnosti, použijte typy instancí nejnovější generace. | Nejnovější generace typů instancí poskytuje nejlepší výkon a nejnovější funkce. | |
Nastavte poměr mezi instancemi na vyžádání a spotovými instancemi na základě toho, jak rychle potřebujete, aby vaše úloha běžela. | Spotové instance šetří náklady, ale mohou ovlivnit dobu celkového běhu operace, pokud jsou spotové instance znovu převzaty. | |
Zvolte velikost uzlů a počet pracovníků na základě typů operací, které provádí vaše pracovní zátěž. | Pokud například očekáváte velké množství přesunů, může být efektivnější používat jeden velký uzel místo několika menších uzlů. | |
Spustit údržbu vakua na clusteru s nastaveným automatickým škálováním pro 1 až 4 pracovní jednotky, kde každá pracovní jednotka má 8 jader. Vyberte ovladač s 8 až 32 jádry. Pokud dojde k chybám nedostatku paměti (OOM), zvětšete velikost ovladače. |
K vakuovým výkazům dochází ve dvou fázích, z nichž druhá je náročná na ovladače. Pokud nepoužíváte správný cluster s správnou velikostí, může operace způsobit zpomalení a nemusí být úspěšné. | |
Posouzení, jestli bude váš dávkový pracovní postup přínosný pro Photon | Photon poskytuje rychlejší dotazy a snižuje celkové náklady na úlohu. |
|