Compartilhar via


Notas de versão do Azure HDInsight no AKS

Importante

O Azure HDInsight no AKS se aposentou em 31 de janeiro de 2025. Saiba mais com este comunicado.

Você precisa migrar suas cargas de trabalho para microsoft fabric ou um produto equivalente do Azure para evitar o encerramento abrupto de suas cargas de trabalho.

Importante

Esse recurso está atualmente em versão prévia. Os termos de uso complementares para o Microsoft Azure Previews incluem mais termos legais que se aplicam aos recursos do Azure que estão em versão beta, em versão prévia ou ainda não lançados em disponibilidade geral. Para obter informações sobre essa versão prévia específica, consulte Azure HDInsight em informações de visualização do AKS. Para obter perguntas ou sugestões de recursos, envie uma solicitação no AskHDInsight com os detalhes e siga-nos para obter mais atualizações sobre da Comunidade do Azure HDInsight.

Este artigo fornece informações sobre o mais recente Azure HDInsight sobre atualizações de versão do AKS. Para obter informações sobre versões anteriores, consulte Azure HDInsight em notas de versão arquivadas do AKS. Se você quiser assinar as notas de lançamento, acompanhe os lançamentos neste repositório GitHub .

Resumo

O HDInsight no AKS é uma PaaS (Plataforma como Serviço) moderna, confiável, segura e totalmente gerenciada que é executada no AKS (Serviço de Kubernetes do Azure). O HDInsight no AKS permite implantar cargas de trabalho populares do Open-Source Analytics, como Apache Spark™, Apache Flink®️ e Trino sem a sobrecarga de gerenciar e monitorar contêineres.

Você pode criar aplicativos de Big Data de ponta a ponta em escala petabyte que abrangem streaming por meio do Apache Flink, engenharia de dados e machine learning usando o Apache Spark e o poderoso mecanismo de consulta do Trino.

Todos esses recursos combinados com o HDInsight no forte foco do desenvolvedor do AKS permitem que empresas e nativos digitais com profunda experiência técnica criem e operem aplicativos adequados às suas necessidades. O HDInsight no AKS permite que os desenvolvedores acessem todas as configurações avançadas fornecidas pelo software de software livre e a extensibilidade para incluir perfeitamente outras ofertas de ecossistema. Essa oferta capacita os desenvolvedores a testar e ajustar seus aplicativos para extrair o melhor desempenho a um custo ideal.

Nota

Para entender sobre o versionamento e suporte do HDInsight no AKS, consulte o esquema de controle de versão .

Você pode consultar a página Novidades para obter todos os detalhes dos recursos que estão atualmente em prévia pública para esta versão.

Importante

O HDInsight no AKS usa práticas de implantação seguras, que envolvem a implantação gradual da região. Pode levar até 10 dias úteis para que um novo lançamento ou uma nova versão esteja disponível em todas as regiões.

Informações de Lançamento

Data de lançamento: 05 de set de 2024

Esta versão se aplica aos seguintes

  • Versão do Cluster Pool: 1.2
  • Versão do cluster: 1.2.1
  • Versão do AKS: 1.27

Atualizado

A versão mais recente da API é a seguinte.

https://github.com/Azure/azure-rest-api-specs/blob/main/specification/hdinsight/resource-manager/Microsoft.HDInsight/HDInsightOnAks/preview/2024-05-01-preview/hdinsight.json.

Importante

Para se beneficiar de todos esses recursos mais recentes, você precisará criar um novo pool de clusters com a versão 1.2 e o cluster 1.2.1

Problemas conhecidos

  • Limitação de identidade da carga de trabalho:
    • Há uma limitação conhecida de ao fazer a transição para identidade de carga de trabalho. Essa limitação ocorre devido à natureza sensível à permissão das operações FIC. Os usuários não podem executar a exclusão de um cluster excluindo o grupo de recursos. As solicitações de exclusão de cluster devem ser acionadas pelo aplicativo/usuário/entidade de segurança com permissões FIC/delete. Caso a exclusão do FIC falhe, a exclusão do cluster de alto nível também falhará.
    • suporte UAMI (Identidades Gerenciadas Atribuídas ao Usuário) – há um limite de 20 FICs por UAMI. Você só pode criar 20 Credenciais Federadas em uma identidade. No cluster AKS do HDInsight, FIC (Federated Identity Credential) e SA têm um mapeamento um-para-um e apenas 20 SAs podem ser criados para uma MSI. Se você quiser criar mais clusters, será necessário fornecer MSIs diferentes para superar a limitação.
    • No momento, não há suporte para a criação de credenciais de identidade federadas em identidades gerenciadas atribuídas pelo usuário criadas essas regiões

Versão do sistema operacional

  • Mariner OS 2.0

Versões de carga de trabalho

Carga Versão
Trino 440
Flink 1.17.0
Apache Spark 3.4

Versões Java e Scala Suportadas

Carga Java Scala
Trino Abrir o JDK 21.0.2
Flink Open JDK 11.0.21 2.12.7
Fagulha Open JDK 1.8.0_345 2.12.15

A visualização está disponível nas seguintes regiões .

Se você tiver mais dúvidas, entre em contato com o Suporte Azure ou consulte a página de opções de suporte. Se você tiver comentários específicos do produto, entre em contato conosco em aka.ms/askhdinsight.

Próximas etapas