Che cos'è HDInsight su AKS? (Anteprima)

Importante

Azure HDInsight su AKS è stato ritirato il 31 gennaio 2025. Scopri di più con questo annuncio .

È necessario eseguire la migrazione dei carichi di lavoro a Microsoft Fabric o a un prodotto Azure equivalente per evitare la chiusura brusca dei carichi di lavoro.

Importante

Questa funzionalità è attualmente in anteprima. Le condizioni supplementari per l'utilizzo per le anteprime di Microsoft Azure includono termini legali più validi applicabili alle funzionalità di Azure in versione beta, in anteprima o altrimenti non ancora rilasciate nella disponibilità generale. Per informazioni su questa anteprima specifica, vedere informazioni sull'anteprima di Azure HDInsight nel servizio Azure Kubernetes. Per domande o suggerimenti sulle funzionalità, inviate una richiesta su AskHDInsight con i dettagli e seguiteci per ulteriori aggiornamenti sulla Community di Azure HDInsight.

HDInsight nel servizio Azure Kubernetes è una piattaforma distribuita come servizio (PaaS) moderna, affidabile, sicura e completamente gestita che viene eseguita nel servizio Azure Kubernetes. HDInsight nel servizio Azure Kubernetes consente di distribuire carichi di lavoro di Open-Source Analytics più diffusi, ad esempio Apache Spark™, Apache Flink®️ e Trino senza sovraccarico di gestione e monitoraggio dei contenitori.

È possibile creare applicazioni Big Data end-to-end e su scala petabyte, spaziando dal flusso di dati tramite Apache Flink, ingegneria dei dati e machine learning tramite Apache Spark, e il potente motore di query di Trino.

Tutte queste funzionalità insieme, combinate con HDInsight e il forte focus sugli sviluppatori di AKS, consentono alle aziende e ai nativi digitali con competenze tecniche approfondite di creare e gestire applicazioni adatte alle proprie esigenze. HDInsight su AKS consente agli sviluppatori di accedere a tutte le ricche configurazioni fornite dal software open source e la possibilità di includere agevolmente altre soluzioni dell'ecosistema. Questa offerta consente agli sviluppatori di testare e ottimizzare le applicazioni per estrarre le migliori prestazioni a un costo ottimale.

HDInsight nel servizio Azure Kubernetes si integra con l'intero ecosistema di Azure, riducendo i cicli di implementazione e migliorando il tempo necessario per realizzare valore.

Architettura tecnica

HDInsight su AKS introduce il concetto di pool di cluster e cluster, che consentono di realizzare il valore completo del data lakehouse. I pool di cluster consentono di usare più carichi di lavoro di calcolo in un singolo data lake, eliminando così il sovraccarico della gestione della rete e della pianificazione delle risorse.

• I pool di cluster sono un raggruppamento logico di cluster che consente di creare un'interoperabilità affidabile tra più tipi di cluster e consente alle aziende di posizionare i cluster nella stessa rete virtuale. I pool di cluster offrono accesso rapido e conveniente a tutti i tipi di cluster creati su richiesta e su larga scala. Un pool di cluster corrisponde a un cluster nell'infrastruttura di AKS.
• cluster sono singoli carichi di lavoro di calcolo, ad esempio Apache Spark, Apache Flink e Trino che possono essere creati rapidamente in pochi minuti con configurazioni predefinite.

È possibile creare il pool con un singolo cluster o una combinazione di tipi di cluster, basati sulla necessità e configurare le opzioni seguenti:

• Immagazzinamento
• Rete
• Registrazione
• Monitoraggio

Il diagramma seguente illustra l'architettura tecnica logica dei componenti installati in un pool di cluster predefinito. I cluster sono isolati usando i namespace nei cluster AKS.

Piattaforma di calcolo nativa del cloud modernizzata

La versione più recente di HDInsight viene orchestrata con il servizio Azure Kubernetes, che consente alla piattaforma di essere più affidabile e consente agli utenti di gestire in modo efficace i cluster. Il provisioning dei cluster su HDInsight su AKS è veloce e affidabile, rendendo facile la gestione dei cluster e l'esecuzione degli aggiornamenti in loco. Con vaste scelte di SKU e modelli di abbonamento flessibili, la modernizzazione dei data lakehouse utilizzando un'infrastruttura open source, nativa del cloud e scalabile su HDInsight su AKS può soddisfare tutte le vostre esigenze di analisi.

Funzionalità chiave includono:

• Creazione e ridimensionamento rapidi del cluster.
• Facilità di manutenzione e aggiornamenti periodici della sicurezza.
• Resilienza dei cluster supportata dal moderno Azure Kubernetes Service nativo del cloud.
• Supporto nativo per l'autenticazione moderna con OAuth e MICROSOFT Entra ID.
• Integrazione approfondita con Servizi di Azure - Azure Data Factory (ADF), Power BI, Monitoraggio di Azure.

Connettività a HDInsight

HDInsight su AKS può connettersi senza soluzione di continuità con HDInsight. È possibile sfruttare i vantaggi dell'uso dei tipi di cluster necessari in un modello ibrido. Interagire con i tipi di cluster di HDInsight usando lo stesso archivio e lo stesso metastore in entrambe le offerte.

HDInsight offre Apache Kafka®, Apache HBase® e altri carichi di lavoro di analisi nella modalità Platform as a Service (PaaS).

Sono supportati gli scenari seguenti:

• Collegare Apache Flink ad Apache HBase
• Connessione di Apache Flink ad Apache Kafka
• Connessione di Apache Spark ad Apache HBase
• Connessione di Apache Spark ad Apache Kafka

Architettura di sicurezza

HDInsight su AKS è sicuro per impostazione predefinita. Consente alle aziende di proteggere gli asset di dati aziendali con Rete virtuale di Azure, crittografia e integrazione con Microsoft Entra ID. Soddisfa anche gli standard di conformità di settore e enti pubblici più diffusi che rispettano gli standard di Azure. Con oltre 30 certificazioni che consentono di proteggere i dati insieme a aggiornamenti periodici, notifiche di Advisor per l'integrità dei servizi, analisi dell'integrità dei servizi, oltre agli standard di sicurezza di Azure migliori. HDInsight su AKS offre diversi metodi per soddisfare le esigenze di sicurezza aziendali di default. Per altre informazioni, vedere HDInsight sulla sicurezza di AKS.

Disponibilità dell'area (anteprima pubblica)

asia pacifico

• Australia orientale
• India centrale
• Asia orientale
• Giappone orientale
• Corea centrale
• Sud-est asiatico

Europa

• Francia centrale
• Europa settentrionale
• Norvegia orientale
• Svizzera settentrionale
• Regno Unito meridionale
• Europa occidentale

Americas

• Brasile meridionale
• Canada centrale
• Stati Uniti centrali
• Stati Uniti orientali
• Stati Uniti orientali 2
• Stati Uniti orientali 2 EUAP
• Stati Uniti centro-meridionali
• Stati Uniti occidentali
• Stati Uniti occidentali 2
• Stati Uniti occidentali 3

Nota

• Il marchio Trino e i marchi sono di proprietà e gestiti dal Trino Software Foundation. Nessuna approvazione da parte di The Trino Software Foundation è implicita dall'uso di questi marchi.
• Apache Spark, Spark e il logo Spark sono marchi di Apache Software Foundation (ASF).
• Apache, Apache Kafka, Kafka e il logo Kafka sono marchi del Apache Software Foundation (ASF).
• Apache, Apache Flink, Flink e il logo Flink sono marchi di Apache Software Foundation (ASF).
• Apache HBase, HBase e il logo HBase sono marchi di Apache Software Foundation (ASF).
• Apache®, Apache Spark™, Apache HBase®, Apache Kafka® e Apache Flink® sono marchi registrati o marchi del Apache Software Foundation negli Stati Uniti e/o in altri paesi. Nessuna approvazione da parte di Apache Software Foundation è implicita dall'uso di questi marchi.