Co to jest usługa HDInsight w usłudze AKS? (wersja zapoznawcza)

Uwaga

Wycofamy usługę Azure HDInsight w usłudze AKS 31 stycznia 2025 r. Przed 31 stycznia 2025 r. należy przeprowadzić migrację obciążeń do usługi Microsoft Fabric lub równoważnego produktu platformy Azure, aby uniknąć nagłego zakończenia obciążeń. Pozostałe klastry w ramach subskrypcji zostaną zatrzymane i usunięte z hosta.

Tylko podstawowa pomoc techniczna będzie dostępna do daty wycofania.

Ważne

Ta funkcja jest aktualnie dostępna jako funkcja podglądu. Dodatkowe warunki użytkowania dla wersji zapoznawczych platformy Microsoft Azure obejmują więcej warunków prawnych, które dotyczą funkcji platformy Azure, które znajdują się w wersji beta, w wersji zapoznawczej lub w inny sposób nie zostały jeszcze wydane w wersji ogólnodostępnej. Aby uzyskać informacje o tej konkretnej wersji zapoznawczej, zobacz Informacje o wersji zapoznawczej usługi Azure HDInsight w usłudze AKS. W przypadku pytań lub sugestii dotyczących funkcji prześlij żądanie w usłudze AskHDInsight , aby uzyskać szczegółowe informacje i postępuj zgodnie z nami, aby uzyskać więcej aktualizacji w społeczności usługi Azure HDInsight.

Usługa HDInsight w usłudze AKS to nowoczesna, niezawodna, bezpieczna i w pełni zarządzana platforma jako usługa (PaaS) działająca w usłudze Azure Kubernetes Service (AKS). Usługa HDInsight w usłudze AKS umożliwia wdrażanie popularnych obciążeń analizy typu open source, takich jak Apache Spark™, Apache Flink®️ i Trino, bez konieczności wprowadzania obciążeń związanych z zarządzaniem kontenerami i ich monitorowaniem.

Możesz tworzyć kompleksowe, petabajtowe aplikacje danych big data obejmujące przesyłanie strumieniowe za pośrednictwem platformy Apache Flink, inżynierii danych i uczenia maszynowego przy użyciu platformy Apache Spark i zaawansowanego aparatu zapytań Trino.

Wszystkie te możliwości w połączeniu z usługą HDInsight w silnym centrum deweloperów usługi AKS umożliwiają przedsiębiorstwom i cyfrowym natywnym osobom z głęboką wiedzą techniczną tworzenie i obsługę aplikacji, które są odpowiednie dla ich potrzeb. Usługa HDInsight w usłudze AKS umożliwia deweloperom dostęp do wszystkich zaawansowanych konfiguracji udostępnianych przez oprogramowanie typu open source oraz rozszerzalność, aby bezproblemowo obejmować inne oferty ekosystemów. Ta oferta umożliwia deweloperom testowanie i dostrajanie swoich aplikacji w celu uzyskania najlepszej wydajności przy optymalnym koszcie.

Usługa HDInsight w usłudze AKS integruje się z całym ekosystemem platformy Azure, skracając cykle implementacji i skracając czas realizacji wartości.

Architektura techniczna

Usługa HDInsight w usłudze AKS wprowadza koncepcję pul klastrów i klastrów, które umożliwiają realizację pełnej wartości usługi Data Lakehouse. Pule klastrów umożliwiają korzystanie z wielu obciążeń obliczeniowych w jednym magazynie typu data lake, co pozwala na usunięcie obciążenia związanego z zarządzaniem siecią i planowaniem zasobów.

• Pule klastrów to logiczne grupowanie klastrów, które pomagają w tworzeniu niezawodnej współpracy między wieloma typami klastrów i umożliwiają przedsiębiorstwom posiadanie klastrów w tej samej sieci wirtualnej. Pule klastrów zapewniają szybki i ekonomiczny dostęp do wszystkich typów klastrów utworzonych na żądanie i na dużą skalę. Jedna pula klastrów odpowiada jednemu klastrowi w infrastrukturze usługi AKS.
• Klastry to pojedyncze obciążenia obliczeniowe, takie jak Apache Spark, Apache Flink i Trino, które można szybko utworzyć w ciągu kilku minut przy użyciu wstępnie ustawionych konfiguracji.

Pulę można utworzyć przy użyciu jednego klastra lub kombinacji typów klastrów, które są oparte na potrzebie i można skonfigurować następujące opcje:

• Storage
• Sieć
• Rejestrowanie
• Monitorowanie

Na poniższym diagramie przedstawiono logiczną architekturę techniczną składników zainstalowanych w domyślnej puli klastrów. Klastry są izolowane przy użyciu przestrzeni nazw w klastrach usługi AKS.

Zmodernizowana natywna dla chmury platforma obliczeniowa

Najnowsza wersja usługi HDInsight jest aranżowana przy użyciu usługi AKS, która umożliwia platformę bardziej niezawodną i umożliwia użytkownikom efektywne obsługę klastrów. Aprowizowanie klastrów w usłudze HDInsight w usłudze AKS jest szybkie i niezawodne, co ułatwia zarządzanie klastrami i przeprowadzanie uaktualnień w miejscu. Dzięki szerokim wyborom jednostek SKU i elastycznym modelom subskrypcji modernizacja magazynów typu data lakehouse przy użyciu rozwiązań typu open source, natywnej dla chmury i skalowalnej infrastruktury w usłudze HDInsight w usłudze AKS może spełniać wszystkie potrzeby analityczne.

Najważniejsze funkcje obejmują:

• Szybkie tworzenie i skalowanie klastra.
• Łatwość konserwacji i okresowych aktualizacji zabezpieczeń.
• Odporność klastra oparta na nowoczesnej usłudze AKS natywnej dla chmury.
• Natywna obsługa nowoczesnego uwierzytelniania przy użyciu protokołu OAuth i identyfikatora Entra firmy Microsoft.
• Głęboka integracja z usługami platformy Azure — Azure Data Factory (ADF), Power BI i Azure Monitor.

Łączność z usługą HDInsight

Usługa HDInsight w usłudze AKS może bezproblemowo łączyć się z usługą HDInsight. Możesz czerpać korzyści wynikające z używania wymaganych typów klastrów w modelu hybrydowym. Współdziałanie z typami klastrów usługi HDInsight przy użyciu tego samego magazynu i magazynu metadanych w obu ofertach.

Usługa HDInsight oferuje platformę Apache Kafka®, bazę danych Apache HBase® i inne obciążenia analityczne w formach platformy jako usługi (PaaS).

Obsługiwane są następujące scenariusze:

• Połączenie apache Flink z bazą danych Apache HBase
• Połączenie apache Flink z platformą Apache Kafka
• Łączenie platformy Apache Spark z bazą danych Apache HBase
• Łączenie platformy Apache Spark z platformą Apache Kafka

Architektura zabezpieczeń

Usługa HDInsight w usłudze AKS jest domyślnie bezpieczna. Umożliwia przedsiębiorstwom ochronę zasobów danych przedsiębiorstwa za pomocą usługi Azure Virtual Network, szyfrowania i integracji z identyfikatorem Entra firmy Microsoft. Spełnia również najpopularniejsze standardy zgodności branżowej i rządowej podtrzymujące standardy platformy Azure. Dzięki ponad 30 certyfikatom, które pomagają chronić dane wraz z okresowymi aktualizacjami, powiadomieniami doradcy kondycji, analizą kondycji usługi oraz najlepszymi standardami zabezpieczeń platformy Azure. Usługa HDInsight w usłudze AKS oferuje kilka metod domyślnie odpowiadających potrzebom w zakresie zabezpieczeń przedsiębiorstwa. Aby uzyskać więcej informacji, zobacz HDInsight on AKS security (Zabezpieczenia usługi HDInsight w usłudze AKS).

Dostępność regionów (publiczna wersja zapoznawcza)

Azja i Pacyfik

• Australia Wschodnia
• Indie Środkowe
• Azja Wschodnia
• Japonia Wschodnia
• Korea Środkowa
• Southeast Asia

Europa

• Francja Środkowa
• Europa Północna
• Norwegia Wschodnia
• Szwajcaria Północna
• Południowe Zjednoczone Królestwo
• West Europe

Ameryka Północna i Południowa

• Brazylia Południowa
• Kanada Środkowa
• Central US
• East US
• Wschodnie stany USA 2
• Wschodnie stany USA 2 — EUAP
• South Central US
• Zachodnie stany USA
• Zachodnie stany USA 2
• Zachodnie stany USA 3

Uwaga

• Marka Trino i znaki towarowe są własnością i są zarządzane przez Trino Software Foundation. Stosowanie tych znaków nie jest dorozumiane przez Fundację Trino Software Foundation.
• Apache Spark, Spark i logo Spark są znakami towarowymi platformy Apache Software Foundation (ASF).
• Apache, Apache Kafka, Kafka i logo platformy Kafka są znakami towarowymi platformy Apache Software Foundation (ASF).
• Apache, Apache Flink, Flink i logo Flink są znakami towarowymi platformy Apache Software Foundation (ASF).
• Apache HBase, HBase i logo HBase są znakami towarowymi platformy Apache Software Foundation (ASF).
• Apache®, Apache Spark™, Apache HBase®, Apache Kafka® i Apache Flink® są zastrzeżonymi znakami towarowymi lub znakami towarowymi platformy Apache Software Foundation w Stany Zjednoczone i/lub innych krajach. Użycie tych znaków nie jest dorozumiane przez fundację Apache Software Foundation.