Sdílet prostřednictvím

Co je Spravovaná lustre Azure?

  • Článek

Azure Managed Lustre je spravovaný systém souborů, který nabízí škálovatelné, výkonné a nákladově efektivní úložiště pro úlohy vysokovýkonného výpočetního prostředí (HPC).

Tady jsou některé klíčové funkce a výhody služby Azure Managed Lustre:

  • Zrychlení úloh HPC: Nabízí vysoce výkonné řešení distribuovaného paralelního systému souborů, které je ideální pro úlohy HPC, které vyžadují vysokou propustnost, nízkou latenci a kompatibilitu protokolu Lustre.
  • účelově sestavená spravovaná služba: Poskytuje výhody paralelního systému souborů Lustre bez složitosti správy základní infrastruktury. Azure Managed Lustre je plně spravovaná služba, která zjednodušuje operace, snižuje náklady na nastavení a eliminuje složitou údržbu.
  • integraci služby Azure Blob Storage: Umožňuje propojit systémy souborů Azure Managed Lustre s kontejnery Azure Blob Storage pro optimální umístění dat a správu nákladů. Další informace najdete v tématu integrace služby Azure Blob Storage.
  • integrace služby Azure Kubernetes Service (AKS): Umožňuje kontejnerizovat úlohy pomocí dostupného ovladače CSI kompatibilního s AKS. Další informace najdete v tématu Použití spravované lustre Azure s Kubernetes.

Lustre je opensourcový paralelní systém souborů, který dokáže škálovat na obrovské velikosti úložiště a zároveň poskytuje vysokou propustnost. Lustre používá nejrychlejší superpočítače na světě a v pracovních postupech orientovaných na data pro mnoho typů odvětví. Další informace o Lustre naleznete v tématu https://www.lustre.org.

Zabezpečení dat ve spravovaném lustre Azure

Všechna data uložená v Azure se ve výchozím nastavení šifrují pomocí spravovaných klíčů Azure. Pokud chcete spravovat klíče používané k šifrování dat uložených v clusteru Azure Managed Lustre, postupujte podle pokynů v šifrování úložiště disků Azure na straně serveru.

Všechny informace ve spravovaném systému souborů Lustre v Azure jsou chráněné šifrováním hostitele virtuálního počítače na spravovaných discích, které obsahují vaše data, i když pro disky Lustre přidáte klíč spravovaný zákazníkem. Přidání klíče spravovaného zákazníkem poskytuje vyšší úroveň zabezpečení pro zákazníky s vysokými potřebami zabezpečení. Další informace najdete v tématu Šifrování diskového úložiště Azure na straně serveru.

Poznámka:

Spravovaná aplikace Azure Lustre neukládá zákaznická data mimo oblast, ve které nasazujete instanci služby.

Odolnost dat ve spravovaném lustre Azure

Váš systém souborů Azure Managed Lustre používá spravované disky Azure jako datové disky cíle úložiště objektů (OST).

Všechny systémy souborů Azure Managed Lustre vytvořené jako "odolný" typ systému souborů používají disky SSD úrovně Azure Premium (jednotka SSD) nakonfigurované jako místně redundantní úložiště (LRS). Obsah disku LRS se třikrát replikuje v rámci místního datacentra, aby se chránil před selháním jednotky a racku serveru.

Samotný systém souborů Azure Managed Lustre také přispívá k odolnosti dat prostřednictvím procesů úložiště objektů, které používá k ukládání dat na těchto discích.

Pokud potřebujete regionální nebo globální redundanci dat, můžete integrovat systém souborů se službou Azure Blob Storage. Po integraci můžete zahájit úlohu exportu pro export souborů do kontejneru Azure Blob Storage s jinou zásadou redundance pro dlouhodobé úložiště. Nakonfigurujte redundanci služby Azure Blob Storage pro účet úložiště. Při vytváření účtu úložiště můžete zvolit zónovou redundanci dat (ZRS) nebo globální redundanci dat (GRS). Další informace o možnostech redundance dat pro spravované soubory Lustre Azure najdete v tématu Podporované typy účtů úložiště.

Integrace služby Azure Blob Storage

Služba Azure Blob Storage je integrovaná se službou Azure Managed Lustre, která umožňuje zadat soubory, které se mají importovat z kontejneru objektů blob pro použití systému souborů. Integrace služby Azure Blob Storage je aplikace správy hierarchického úložiště Lustre (HSM). Není nutné importovat celou datovou sadu pro každou úlohu. Místo toho můžete vytvořit jiný systém souborů pro různé úlohy a ukládat data do méně nákladných kontejnerů objektů blob Azure mezi použitím. Po dokončení vysoce výkonných výpočetních úloh můžete exportovat změněná data do služby Azure Blob Storage a odstranit systém Azure Managed Lustre.

Spravovaná lustre Azure je přizpůsobená tak, aby bez problémů fungovala se službou Azure Blob Storage. Můžete určit existující kontejner objektů blob, aby byla jeho stávající data zpřístupněna z vašeho souborového systému Azure Managed Lustre. Můžete také zadat prázdný kontejner, který naplníte daty, nebo použít k uložení výstupu. Nastavení a údržba se provádí za vás. Stačí zadat, který kontejner objektů blob se má použít.

Pokud službu Azure Blob Storage integrujete při vytváření systému souborů Lustre, můžete použít funkce Lustre HSM. Pokud nechcete výhody modulu Lustre HSM, můžete importovat a exportovat data pro systém souborů Azure Managed Lustre pomocí klientských příkazů přímo.

Další informace o této funkci najdete v tématu integrace služby Azure Blob Storage.

Použití spravované lustre Azure s Kubernetes

Pokud chcete se svými kontejnery Kubernetes použít systém úložiště Lustre spravovaný v Azure, můžete použít ovladač rozhraní podpory kontejnerů Azure Lustre (CSI) pro Kubernetes, který je kompatibilní se službou Azure Kubernetes Service (AKS). Jiné typy instalace Kubernetes se v současné době nepodporují.

Kubernetes může zjednodušit konfiguraci a nasazení koncových bodů virtuálního klienta pro úlohy Spravované lustre Azure a automatizovat úlohy nastavení, jako jsou:

  • Vytváření škálovacích sad virtuálních počítačů Azure používaných službou Azure Kubernetes Service (AKS) ke spuštění podů
  • Načítání správného klientského softwaru Lustre na instance virtuálních počítačů
  • Zadání přípojného bodu Lustre spravovaného lustre Azure a šíření informací do podů klienta.

Ovladač Azure Lustre CSI pro Kubernetes dokáže automatizovat instalaci klientského softwaru a montážních jednotek. Ovladač poskytuje modul plug-in kontroleru CSI jako nasazení se dvěma replikami ve výchozím nastavení a modul plug-in uzlu CSI jako daemonSet. Počet replik můžete změnit.

Další informace o této funkci najdete v tématu Použití ovladače Azure Managed Lustre CSI se službou Azure Kubernetes Service.

Informace o verzích ovladačů, které se mají použít, najdete v tématu Kompatibilní verze Kubernetes.

Související obsah