Sdílet prostřednictvím

Co je Spravovaná lustre Azure?

  • Článek

Služba Azure Managed Lustre poskytuje možnost rychle vytvořit systém souborů Lustre založený na Azure pro cloudové úlohy vysokovýkonných výpočetních úloh.

Lustre je opensourcový paralelní systém souborů, který dokáže škálovat na obrovské velikosti úložiště a zároveň poskytuje vysokou propustnost. Lustre používá nejrychlejší superpočítače na světě a v pracovních postupech orientovaných na data pro mnoho typů odvětví. Další informace najdete na webu https://www.lustre.org.

Azure Managed Lustre vám ušetří práci se zřizováním, konfigurací a správou vlastního systému souborů Lustre. Pomocí příkazu Vytvořit na webu Azure Portal můžete rychle nasadit systém souborů Lustre ve velikosti, kterou potřebujete, připojit klienty a být připraveni k použití systému.

Služba Microsoft Azure Blob Storage je integrovaná se službou Azure Managed Lustre, která umožňuje zadat soubory, které se mají importovat z kontejneru objektů blob pro použití systému souborů. Po dokončení vysoce výkonných výpočetních úloh můžete exportovat změněná data do služby Azure Blob Storage a odstranit systém Azure Managed Lustre. Další informace najdete v tématu Integrace služby Azure Blob Storage dále v tomto článku.

Systém souborů Azure Managed Lustre můžete použít také s kontejnery Azure Kubernetes Service (AKS). Další informace najdete v tématu Použití spravované lustre Azure s Kubernetes.

Zabezpečení dat ve spravovaném lustre Azure

Všechna data uložená v Azure se ve výchozím nastavení šifrují pomocí spravovaných klíčů Azure. Pokud chcete spravovat klíče používané k šifrování dat uložených v clusteru Azure Managed Lustre, postupujte podle pokynů v šifrování úložiště disků Azure na straně serveru.

Všechny informace v systému souborů Spravované lustre Azure jsou také chráněné šifrováním hostitele virtuálního počítače na spravovaných discích, které obsahují vaše data, i když pro disky Lustre přidáte klíč spravovaný zákazníkem. Přidání klíče spravovaného zákazníkem poskytuje vyšší úroveň zabezpečení pro zákazníky s vysokými potřebami zabezpečení. Další informace najdete v tématu Šifrování diskového úložiště Azure na straně serveru.

Poznámka:

Spravovaná aplikace Azure Lustre neukládá zákaznická data mimo oblast, ve které nasazujete instanci služby.

Odolnost dat ve spravovaném lustre Azure

Váš systém souborů Azure Managed Lustre používá spravované disky Azure jako datové disky cíle úložiště objektů (OST).

Všechny systémy souborů Azure Managed Lustre vytvořené jako "odolný" typ systému souborů používají disky SSD úrovně Azure Premium (jednotka SSD) nakonfigurované jako místně redundantní úložiště (LRS). Obsah disku LRS se třikrát replikuje v rámci místního datacentra, aby se chránil před selháním jednotky a racku serveru.

Samotný systém souborů Azure Managed Lustre také přispívá k odolnosti dat prostřednictvím procesů úložiště objektů, které používá k ukládání dat na těchto discích.

Pokud potřebujete regionální nebo globální redundanci dat, můžete integrovat systém souborů se službou Azure Blob Storage. Po integraci můžete zahájit úlohu exportu pro export souborů do kontejneru Azure Blob Storage s jinou zásadou redundance pro dlouhodobé úložiště. Nakonfigurujte redundanci služby Azure Blob Storage pro účet úložiště. Při vytváření účtu úložiště můžete zvolit zónovou redundanci dat (ZRS) nebo globální redundanci dat (GRS). Další informace o možnostech redundance dat pro spravované soubory Lustre Azure najdete v tématu Podporované typy účtů úložiště.

Integrace služby Azure Blob Storage

Služba Microsoft Azure Blob Storage je integrovaná se službou Azure Managed Lustre, která umožňuje zadat soubory, které se mají importovat z kontejneru objektů blob pro použití systému souborů. Integrace služby Azure Blob Storage je aplikace správy hierarchického úložiště Lustre (HSM). Není nutné importovat celou datovou sadu pro každou úlohu. Místo toho můžete vytvořit jiný systém souborů pro různé úlohy a ukládat data do méně nákladných kontejnerů objektů blob Azure mezi použitím. Po dokončení vysoce výkonných výpočetních úloh můžete exportovat změněná data do služby Azure Blob Storage a odstranit systém Azure Managed Lustre.

Spravovaná lustre Azure je přizpůsobená tak, aby bez problémů fungovala se službou Azure Blob Storage. Můžete zadat existující kontejner objektů blob, aby byl jeho stávající data přístupná ze systému souborů Azure Managed Lustre, nebo můžete zadat prázdný kontejner, který naplníte daty, nebo použít k uložení výstupu. Nastavení a údržba se provádí za vás. Stačí zadat, který kontejner objektů blob se má použít.

Pokud službu Azure Blob Storage integrujete při vytváření systému souborů Lustre, můžete použít funkce Lustre HSM. Pokud nechcete výhody modulu Lustre HSM, můžete importovat a exportovat data pro systém souborů Azure Managed Lustre pomocí klientských příkazů přímo.

Použití spravované lustre Azure s Kubernetes

Pokud chcete se svými kontejnery Kubernetes použít systém úložiště Lustre spravovaný v Azure, můžete použít ovladač rozhraní podpory kontejnerů Azure Lustre (CSI) pro Kubernetes, který je kompatibilní se službou Azure Kubernetes Service (AKS). Jiné typy instalace Kubernetes se v současné době nepodporují.

Kubernetes může zjednodušit konfiguraci a nasazení koncových bodů virtuálního klienta pro úlohy Spravované lustre Azure a automatizovat úlohy nastavení, jako jsou:

  • Vytváření škálovacích sad virtuálních počítačů Azure používaných službou Azure Kubernetes Service (AKS) ke spuštění podů
  • Načítání správného klientského softwaru Lustre na instance virtuálních počítačů
  • Zadání přípojného bodu Lustre spravovaného lustre Azure a šíření informací do podů klienta.

Ovladač Azure Lustre CSI pro Kubernetes dokáže automatizovat instalaci klientského softwaru a montážních jednotek. Ovladač poskytuje modul plug-in kontroleru CSI jako nasazení se dvěma replikami ve výchozím nastavení a modul plug-in uzlu CSI jako daemonSet. Počet replik můžete změnit.

Informace o verzích ovladačů, které se mají použít, najdete v tématu Kompatibilní verze Kubernetes.

Další kroky