Fuskark för beräkningsskapande
Den här artikeln syftar till att ge tydlig och åsiktsorienterad vägledning för att skapa beräkning. Genom att använda rätt beräkningstyper för arbetsflödet kan du förbättra prestanda och spara på kostnaderna.
| Metodtips | Påverkan | Dokument |
|---|---|---|
| Om du är nybörjare på Azure Databricks börjar du med att använda allmänna instanstyper för alla syften | Om du väljer lämplig instanstyp för arbetsbelastningen blir effektiviteten högre. | - Skapa ett kluster |
| Använd läget för delad åtkomst om inte nödvändiga funktioner inte stöds | Beräkning med läget för delad åtkomst kan användas av flera användare med dataisolering mellan användare. | - Åtkomstlägen |
| Använd de senaste generationsinstanstyperna om det finns tillräckligt med tillgänglighet | Den senaste generationen av instanstyper ger bästa prestanda och de senaste funktionerna. | - Azure-instanstyper |
| Ange ditt saldo på begäran och spot-instance baserat på hur snabbt du behöver din arbetsbelastning för att köras | Spot-instanser sparar på kostnaden men kan påverka den totala körningstiden för en åtgärd om de oanvända instanserna återtas. | - Rekommendationer för beräkningskonfiguration |
| Välj storleken på dina noder och antalet arbetare baserat på de typer av åtgärder som din arbetsbelastning utför | Om du till exempel förväntar dig många blandningar kan det vara mer effektivt att använda en stor enskild nod i stället för flera mindre noder. | - Överväganden för beräkningsstorlek |
| Kör vakuum på ett kluster med automatisk skalningsuppsättning för 1–4 arbetare, där varje arbetare har 8 kärnor. Välj en drivrutin med mellan 8 och 32 kärnor. Öka storleken på drivrutinen om du får OOM-fel (out-of-memory). |
Vakuuminstruktioner sker i två faser, varav den andra är förartung. Om du inte använder det högra klustret kan åtgärden orsaka en avmattning och kanske inte lyckas. | - Vilket storlekskluster behöver vakuum? - BÄSTA PRAXIS FÖR VAKUUM |
| Utvärdera om batcharbetsflödet skulle dra nytta av Photon | Photon ger snabbare frågor och minskar din totala kostnad per arbetsbelastning. | - Photon-fördelar |