NCCads_H100_v5 大小系列
NCCads H100 v5 系列的虛擬機器是 Azure GPU 系列的新成員。 在此 VM SKU 中,信任的執行環境 (TEE) 跨越 CPU 和所連結 GPU 上的機密 VM,讓資料、模型和計算能安全卸載至 GPU。
NCCads H100 v5 系列由第 4 代 AMD EPYC™ Genoa 處理器和 NVIDIA H100 Tensor Core GPU 提供支援。 這些 VM 配備 1 個具 94 GB 記憶體的 NVIDIA H100 NVL GPU、40 個非多執行緒 AMD EPYC Genoa 處理器核心,以及 320 GiB 的系統記憶體。 這些 VM 適用於實際應用的 AI 工作負載,例如:
- GPU 加速分析和資料庫
- 包含大量前置和後置處理的批次推斷
- 機器學習 (ML) 開發
- 影片處理
- AI/ML Web 服務
主機規格
部分 |
數量 計數單位 |
規格 SKU 識別碼、效能單位等。 |
處理器 |
40 個 vCPU |
AMD EPYC (Genoa) [x86-64] |
記憶體 |
320 GiB |
|
本機存放區 |
1 個磁碟 |
800 GiB |
遠端儲存體 |
8 個磁碟 |
100000 IOPS 3000 MBps |
網路 |
2 NICs |
40000 Mbps |
加速器 |
1 GPU |
Nvidia H100 GPU (94GB) |
功能支援
進階儲存體:支援
進階儲存體快取:支援
即時移轉:不支援
記憶體保留更新:不支援
第 2 代 VM:支援
第 1 代 VM:不支援
加速網路:不支援
暫時性 OS 磁碟:支援
巢狀虛擬化:不支援
系列中的大小
每個大小的 vCPU (數量) 和記憶體
大小名稱 |
vCPU (數量) |
記憶體 (GB) |
Standard_NCC40ads_H100_v5 |
40 |
320 |
VM 基本資源
每個大小的本機 (temp) 儲存體資訊
大小名稱 |
最大暫存儲存體磁碟 (數量) |
暫存磁碟大小 (GiB) |
Standard_NCC40ads_H100_v5 |
1 |
800 |
儲存體資源
表格定義
- 1RR (隨機讀取) 和 RW (隨機寫入) 作業之間的暫存磁碟速度通常有所不同。 RR 作業速度通常比 RW 作業更快。 在僅列出 RR 速度值的系列中,RW 速度通常比 RR 慢。
- 儲存容量會以 GiB 或是 1024^3 位元組為單位顯示。 當比較使用 GB (1000^3 位元組) 為度量單位的磁碟與使用 GiB (1024^3) 為度量單位的磁碟時,請記住以 GiB 為單位提供的容量數字可能較小。 例如,1023 GiB = 1098.4 GB。
- 磁碟輸送量是以每秒輸入/輸出作業 (IOPS) 和 MBps 進行測量,其中 MBps = 10^6 位元組/每秒。
- 若要瞭解如何取得 VM 的最佳儲存體效能,請參閱虛擬機器和磁碟效能。
每個大小的遠端 (未快取) 儲存體資訊
大小名稱 |
最大遠端儲存體磁碟 (數量) |
未快取的磁碟 IOPS |
未快取的磁碟速度 (MBps) |
Standard_NCC40ads_H100_v5 |
8 |
100000 |
3000 |
儲存體資源
表格定義
- 1某些大小支援使用高載來暫時提高磁碟效能。 高載速度一次最多可維持 30 分鐘。
- 2特殊儲存體是指 Ultra 磁碟或進階 SSD v2 儲存體。
- 儲存容量會以 GiB 或是 1024^3 位元組為單位顯示。 當比較使用 GB (1000^3 位元組) 為度量單位的磁碟與使用 GiB (1024^3) 為度量單位的磁碟時,請記住以 GiB 為單位提供的容量數字可能較小。 例如,1023 GiB = 1098.4 GB。
- 磁碟輸送量是以每秒輸入/輸出作業 (IOPS) 和 MBps 進行測量,其中 MBps = 10^6 位元組/每秒。
- 資料磁碟可以在快取模式或取消快取模式下運作。 針對快取的資料磁碟作業,主機快取模式必須設定為 ReadOnly 或 ReadWrite。 針對取消快取的資料磁碟作業,主機快取模式必須設定為 None。
- 若要瞭解如何取得 VM 的最佳儲存體效能,請參閱虛擬機器和磁碟效能。
每個大小的網路介面資訊
大小名稱 |
最大 NIC (數量) |
最大頻寬 (Mbps) |
Standard_NCC40ads_H100_v5 |
2 |
40000 |
網路資源
表格定義
- 預期的網路頻寬是針對所有目的地,為所有 NIC 中每個 VM 類型配置的最大彙總頻寬。 如需詳細資訊,請參閱虛擬機器網路頻寬
- 不保證效能上限。 限制針對預定應用程式選取正確 VM 類型的供應項目指導。 實際網路效能取決於多種因素,包括網路壅塞、應用程式負載和網路設定。 如需最佳化網路輸送量的資訊,請參閱最佳化 Azure 虛擬機器的網路輸送量。
- 若要達到 Linux 或 Windows 上的預期網路效能,您可能需要選取特定版本,或最佳化 VM。 如需詳細資訊,請參閱頻寬/輸送量測試 (NTTTCP)。
每個大小的加速器 (GPU、FPGA 等) 資訊
大小名稱 |
加速器 (數量) |
加速器-記憶體 (GB) |
Standard_NCC40ads_H100_v5 |
1 |
94 |
建立 VM
若要開始使用 NCCads H100 v5 VM,以及有關機密 GPU 驅動程式和證明設定的資訊,請參閱 機密 GPU 設定
所有可用大小清單:大小
定價計算機:定價計算機
磁碟類型的相關資訊:磁碟類型
下一步
深入了解 Azure 計算單位 (ACU) 如何協助您比較各個 Azure SKU 的計算效能。
請參閱 Azure 專用主機,讓實體伺服器能夠裝載指派給一個 Azure 訂用帳戶的一或多部虛擬機器。
了解如何監視 Azure 虛擬機器。