Udostępnij za pośrednictwem

NCads serii H100 v5

  • Artykuł

Dotyczy: ✔️ Maszyny wirtualne z systemem Linux Maszyny ✔️ wirtualne z systemem Windows ✔️ — elastyczne zestawy ✔️ skalowania

Maszyny wirtualne serii NCads H100 v5 to nowy dodatek do rodziny procesorów GPU platformy Azure. Tej serii można używać do rzeczywistych aplikacja systemu Azure lied ai training and batch inference workloads (Trenowanie sztucznej inteligencji i wnioskowanie wsadowe). Maszyny wirtualne serii NCads H100 v5 są obsługiwane przez procesory GPU NVIDIA H100 NVL i procesory AMD EPYC™ Genu drugiej generacji. Maszyny wirtualne mają maksymalnie 2 procesory GPU NVIDIA H100 NVL z pamięcią 94 GB każdy, do 96 niewątków wielowątkowych procesorów AMD EPYC Genu i 640 GiB pamięci systemowej. Te maszyny wirtualne są idealne dla rzeczywistych obciążeń stosowanych sztucznej inteligencji, takich jak:

  • Przyspieszona analiza procesora GPU i bazy danych
  • Wnioskowanie wsadowe z dużym obciążeniem przetwarzaniem wstępnym i po przetworzeniu
  • Trenowanie modelu autonomii
  • Symulacja zbiornika ropy naftowej i gazu
  • Programowanie w usłudze Machine Learning (ML)
  • Przetwarzanie wideo
  • Usługi internetowe sztucznej inteligencji/uczenia maszynowego

Obsługiwane funkcje

Aby rozpocząć pracę z maszynami wirtualnymi NCads H100 v5, zapoznaj się z tematem Konfiguracja i optymalizacja obciążenia HPC, aby zapoznać się z krokami, takimi jak konfiguracja sterownika i sieci.

Ze względu na zwiększoną ilość operacji we/wy pamięci procesora GPU program NCads H100 v5 wymaga użycia maszyn wirtualnych generacji 2 i obrazów platformy handlowej. Postępuj zgodnie z instrukcjami obrazów hpc platformy Azure w celu skonfigurowania.

Rozmiar Procesor wirtualny Pamięć (GiB) Dysk tymczasowy NVMe (GiB) Procesor GPU Pamięć procesora GPU (GiB) Maks. liczba dysków danych Maksymalna przepływność dysku bez buforowania (liczba operacji we/wy na sekundę/MB/s) Maksymalna przepustowość kart sieciowych/sieci (MB/s)
Standard_NC40ads_H100_v5 40 320 3576 1 94 8 100000/3000 2/40,000
Standard_NC80adis_H100_v5 80 640 7152 2 188 16 240000/7000 4/80,000

1 1 procesor GPU = jedna karta H100
2 Lokalne dyski NVMe są efemeryczne. Dane zostaną utracone na tych dyskach, jeśli zatrzymasz/cofniesz przydział maszyny wirtualnej. Lokalne dyski NVMe nie są szyfrowane za pomocą szyfrowania usługi Azure Storage, nawet jeśli włączono szyfrowanie na hoście.

Definicje tabel rozmiaru

  • Pojemność magazynu jest podawana w jednostkach GiB (1024^3 bajtów). Podczas porównywania dysków mierzonych w GB (1000^3 bajtów) z dyskami mierzonymi w GiB (1024^3) pamiętaj, że liczby pojemności podane w GiB mogą wydawać się mniejsze. Na przykład 1023 GiB = 1098,4 GB.

  • Przepływność dysku mierzona jest jako liczba operacji wejścia/wyjścia na sekundę i MB/s, gdzie 1 MB/s = 10^6 bajtów/s.

  • Dyski danych mogą działać w trybie buforowanym lub niebuforowanym. Dla pracy dysku danych w trybie buforowanym tryb pamięci podręcznej hosta jest ustawiony na wartość ReadOnly lub ReadWrite. Dla pracy dysku danych bez buforowania tryb pamięci podręcznej hosta jest ustawiony na wartość None.

  • Aby dowiedzieć się, jak uzyskać najlepszą wydajność magazynu dla maszyn wirtualnych, zobacz Wydajność maszyny wirtualnej i dysku.

  • Oczekiwana przepustowość sieci to maksymalna zagregowana przepustowość przydzielona na typ maszyny wirtualnej dla wszystkich kart sieciowych dla wszystkich miejsc docelowych. Aby uzyskać więcej informacji, zobacz Przepustowość sieci maszyny wirtualnej.

    Górne limity nie są gwarantowane. Wskazówki dotyczące ofert limitów dotyczące wybierania odpowiedniego typu maszyny wirtualnej dla zamierzonej aplikacji. Rzeczywista wydajność sieci zależy od kilku czynników, w tym przeciążenia sieci, obciążeń aplikacji i ustawień sieci. Aby uzyskać informacje na temat optymalizowania przepływności sieci, zobacz Optymalizowanie przepływności sieci dla maszyn wirtualnych platformy Azure. Aby osiągnąć oczekiwaną wydajność sieci w systemie Linux lub Windows, może być konieczne wybranie określonej wersji lub zoptymalizowanie maszyny wirtualnej. Aby uzyskać więcej informacji, zobacz Testowanie przepustowości/przepływności (NTTTCP).

Inne rozmiary i informacje

Kalkulator cen umożliwia oszacowanie kosztów maszyn wirtualnych platformy Azure.

Aby uzyskać więcej informacji na temat typów dysków, zobacz Jakie typy dysków są dostępne na platformie Azure?

Następny krok