Co je HDInsight v AKS? (Preview)

Důležitý

Azure HDInsight v AKS byl vyřazen 31. ledna 2025. Zjistěte více o s tímto oznámením.

Abyste se vyhnuli náhlému ukončení úloh, musíte migrovat úlohy do Microsoft Fabric nebo ekvivalentního produktu Azure.

Důležitý

Tato funkce je aktuálně ve verzi Preview. Doplňkové podmínky použití pro Microsoft Azure Previews zahrnují další právní podmínky, které se vztahují na funkce Azure ve stavu beta, ve verzi preview nebo jinak dosud nebyly uvolněny k běžné dostupnosti. Informace o této konkrétní verzi Preview najdete v tématu Azure HDInsight ve službě AKS ve verzi Preview. Pokud máte dotazy nebo návrhy funkcí, odešlete prosím žádost na AskHDInsight s podrobnostmi a sledujte nás pro další aktualizace v komunitě Azure HDInsight.

HDInsight v AKS je moderní, spolehlivá, zabezpečená a plně spravovaná platforma jako služba (PaaS), která běží ve službě Azure Kubernetes Service (AKS). HDInsight v AKS umožňuje nasadit oblíbené úlohy Open-Source Analytics, jako jsou Apache Spark™, Apache Flink®️ a Trino, bez režie při správě a monitorování kontejnerů.

Pomocí Apache Flinku pro streamování, Apache Sparku pro přípravu dat a strojové učení a výkonného dotazovacího stroje Trino můžete vytvářet od začátku do konce komplexní aplikace velkého rozsahu pro zpracování petabajtů dat.

Všechny tyto možnosti v kombinaci se službou HDInsight na silném vývojářském zaměření AKS umožňují podnikům a digitálním nativním pracovníkům s hlubokými technickými znalostmi vytvářet a provozovat aplikace, které jsou vhodné pro své potřeby. HDInsight v AKS umožňuje vývojářům přístup ke všem bohatým konfiguracím poskytovaným opensourcovým softwarem a rozšiřitelností, aby bez problémů zahrnovaly další nabídky ekosystému. Díky této nabídce můžou vývojáři testovat a ladit své aplikace, aby extrahovali nejlepší výkon za optimálních nákladů.

HDInsight ve službě AKS se integruje s celým ekosystémem Azure, zkracuje cykly implementace a vylepšuje čas k realizaci hodnoty.

Technická architektura

HDInsight v AKS představuje koncept clusterových poolů a clusterů, které umožňují realizovat úplnou hodnotu datového lakehouse. Pooly clusterů umožňují využít více výpočetních úloh v jednom datovém jezeře, což odstraňuje potřebu správy sítí a plánování zdrojů.

• Pooly clusterů jsou logické seskupení clusterů, které pomáhají vytvářet robustní interoperabilitu napříč několika typy clusterů a umožňují podnikům mít clustery ve stejné virtuální síti. Fondy clusterů poskytují rychlý a nákladově efektivní přístup ke všem typům clusterů vytvořeným na vyžádání a ve velkém měřítku. Jeden pool clusterů odpovídá jednomu clusteru v infrastruktuře AKS.
• clustery jsou jednotlivé výpočetní úlohy, jako jsou Apache Spark, Apache Flink a Trino, které se dají rychle vytvořit během několika minut s přednastavenými konfiguracemi.

Fond můžete vytvořit s jedním klastrem nebo kombinací typů klastrů, které lze upravit podle potřeb následujícími možnostmi konfigurace:

• Skladování
• Síť
• Protokolování
• Monitorování

Následující diagram znázorňuje logickou technickou architekturu komponent nainstalovaných ve výchozím fondu clusterů. Clustery jsou izolované pomocí jmenných prostorů v clusterech AKS.

Modernizovaná cloudově nativní výpočetní platforma

Nejnovější verze SLUŽBY HDInsight se orchestruje pomocí AKS, která umožňuje platformě být robustnější a umožňuje uživatelům efektivně zpracovávat clustery. Zřizování clusterů ve službě HDInsight v AKS je rychlé a spolehlivé a usnadňuje správu clusterů a provádění místních upgradů. Díky rozsáhlým možnostem skladových položek a flexibilním modelům předplatného můžete modernizovat datová jezera s využitím opensourcové, nativní pro cloud a škálovatelné infrastruktury ve službě HDInsight v AKS, která splňuje všechny vaše analytické potřeby.

Mezi klíčové funkce patří:

• Rychlé vytváření a škálování clusteru
• Snadná údržba a pravidelné aktualizace zabezpečení.
• Odolnost clusteru založená na moderní cloudové nativní AKS
• Nativní podpora moderního ověřování pomocí OAuth a Microsoft Entra ID
• Hloubková integrace se službami Azure – Azure Data Factory (ADF), Power BI, Azure Monitor

Připojení ke službě HDInsight

HDInsight v AKS se může bezproblémově připojit s HDInsightem. Výhody použití potřebných typů clusterů v hybridním modelu můžete využít. Spolupracovat s typy clusterů HDInsight využívající stejné úložiště a metadatové úložiště v rámci obou nabídek.

HDInsight nabízí apache Kafka®, Apache HBase® a další analytické úlohy ve formátu PaaS (Platform as a Service).

jsou podporovány následující scénáře:

• připojení Apache Flink k Apache HBase
• Apache Flink připojení k Apache Kafka
• Připojení Apache Sparku k Apache HBase
• Připojení Apache Sparku k Apache Kafka

Architektura zabezpečení

HDInsight v AKS je ve výchozím nastavení zabezpečený. Umožňuje podnikům chránit podnikové datové prostředky pomocí služby Azure Virtual Network, šifrování a integrace s Microsoft Entra ID. Splňuje také nejoblíbenější oborové standardy a standardy dodržování předpisů státní správy, které dodržují standardy Azure. S více než 30 certifikacemi, které pomáhají chránit data spolu s pravidelnými aktualizacemi, oznámeními health advisoru, analýzou stavu služeb a nejlepšími standardy zabezpečení Azure. HDInsight v AKS nabízí několik metod, jak ve výchozím nastavení řešit potřeby podnikového zabezpečení. Další informace naleznete v tématu HDInsight ohledně zabezpečení AKS.

diagram

Dostupnost oblastí (veřejná ukázka)

Asie Tichomoří

• Austrálie – východ
• Střední Indie
• Východní Asie
• Japonsko – východ
• Korea – střed
• Jihovýchodní Asie

Evropa

• Francie – střed
• Severní Evropa
• Norsko – východ
• Švýcarsko – sever
• Velká Británie – jih
• Západní Evropa

Ameriky

• Brazílie – jih
• Kanada – střed
• USA – střed
• USA – východ
• Východ USA 2
• USA – východ 2 EUAP
• středojižní část USA
• USA – západ
• Západní USA 2
• Západní USA 3

Poznámka

• Značka a ochranné známky Trino vlastní a spravuje Trino Software Foundation. Použití těchto značek nevyžaduje žádné doporučení společnosti The Trino Software Foundation.
• Apache Spark, Spark a logo Spark jsou ochranné známky Apache Software Foundation (ASF).
• Apache, Apache Kafka, Kafka a logo Kafka jsou ochranné známky Apache Software Foundation (ASF).
• Apache, Apache Flink, Flink a logo Flink jsou ochranné známky Apache Software Foundation (ASF).
• Apache HBase, HBase a logo HBase jsou ochranné známky Apache Software Foundation (ASF).
• Apache®, Apache Spark™, Apache HBase®, Apache Kafka® a Apache Flink® jsou registrované ochranné známky nebo ochranné známky Apache Software Foundation ve Spojených státech nebo v jiných zemích. Použití těchto značek neznamená schválení Apache Software Foundation.