Notas sobre a versão do Azure HDInsight no AKS
Observação
Desativaremos o Microsoft Azure HDInsight no AKS em 31 de janeiro de 2025. Para evitar o encerramento abrupto das suas cargas de trabalho, você precisará migrá-las para o Microsoft Fabric ou para um produto equivalente do Azure antes de 31 de janeiro de 2025. Os clusters restantes em sua assinatura serão interrompidos e removidos do host.
Somente o suporte básico estará disponível até a data de desativação.
Importante
Esse recurso está atualmente na visualização. Os Termos de uso complementares para versões prévias do Microsoft Azure incluem mais termos legais que se aplicam aos recursos do Azure que estão em versão beta, em versão prévia ou ainda não lançados em disponibilidade geral. Para obter informações sobre essa versão prévia específica, confira Informações sobre a versão prévia do Azure HDInsight no AKS. Caso tenha perguntas ou sugestões de recursos, envie uma solicitação no AskHDInsight com os detalhes e siga-nos para ver mais atualizações sobre a Comunidade do Azure HDInsight.
Esse artigo fornece informações sobre as atualizações de versões mais recentes do Azure HDInsight no AKS. Para obter informações sobre versões anteriores, consulte as notas de versão arquivadas do Azure HDInsight no AKS. Se você quiser assinar as notas de versão, observe as versões neste repositório GitHub.
Resumo
O HDInsight no AKS é uma Plataforma como Serviço (PaaS) moderna, confiável, segura e totalmente gerenciada que é executada no Serviço de Kubernetes do Azure (AKS). O HDInsight no AKS permite implantar cargas de trabalho populares do Open-Source Analytics, como Apache Spark™, Apache Flink®️ e Trino, sem a sobrecarga de gerenciar e monitorar contêineres.
Você pode criar aplicativos de Big Data completos em escala de petabytes, abrangendo streaming por meio do Apache Flink, engenharia de dados e aprendizado de máquina usando o Apache Spark e o eficiente mecanismo de consulta da Trino.
Todos esses recursos combinados com o forte foco de desenvolvedor do HDInsight no AKS permitem que empresas e nativos digitais com profundo conhecimento técnico criem e operem aplicativos adequados às suas necessidades. O HDInsight no AKS permite que os desenvolvedores acessem todas as configurações avançadas fornecidas pelo software de código aberto e a extensibilidade para incluir perfeitamente outras ofertas de ecossistema. Essa oferta permite que os desenvolvedores testem e ajustem seus aplicativos para extrair o melhor desempenho a um custo ideal.
Observação
Para entender sobre o HDInsight no controle de versão e suporte do AKS, consulte a esquema de controle de versão.
Você pode consultar a página Novidades para todos os detalhes dos recursos atualmente em versão prévia pública para esta versão.
Importante
O HDInsight no AKS usa práticas de implantação segura que envolvem a implantação gradual de região. Pode levar até 10 dias úteis para uma nova versão ficar disponível em todas as regiões.
Informações sobre a versão
Data do lançamento: 05 de maio de 2024
Essa versão se aplica ao seguinte
- Versão do pool de clusters: 1.2
- Versão do cluster: 1.2.1
- Versão do AKS: 1.27
Atualizado
A versão mais recente da API é a mostrada a seguir.
Importante
Para se beneficiar de todos esses recursos mais recentes, você precisará criar um novo pool de clusters com 1.2 e a versão de cluster 1.2.1
Problemas conhecidos
- Limitação de identidade da carga de trabalho:
- Há uma limitação conhecida ao transicionar para a identidade da carga de trabalho. Essa limitação ocorre devido à natureza sensível à permissão das operações FIC. Os usuários não podem executar a exclusão de um cluster excluindo o grupo de recursos. As solicitações de exclusão de cluster devem ser disparadas pelo aplicativo/usuário/entidade de segurança com permissões FIC/delete. Se a exclusão da FIC falhar, a exclusão de cluster de alto nível também falhará.
- Suporte a UAMI (Identidades Gerenciadas Atribuídas ao Usuário) – há um limite de 20 FICs por UAMI. Você só pode criar 20 Credenciais Federadas em uma identidade. No HDInsight no cluster do AKS, a FIC (Federated Identity Credential) e o SA têm um mapeamento um-para-um e apenas 20 SAs podem ser criados em relação a um MSI. Se você quiser criar mais clusters, será necessário fornecer MSIs diferentes para superar a limitação.
- Atualmente, não há suporte para a criação de credenciais de identidade federadas em identidades gerenciadas atribuídas pelo usuário criadas nessas regiões
Versão do sistema operacional
- SO Mariner 2.0
Versões de carga de trabalho
| Carga de trabalho | Versão |
|---|---|
| Trino | 440 |
| Flink | 1.17.0 |
| Apache Spark | 3.4 |
Versões do Java e do Scala com suporte
| Carga de trabalho | Java | Scala |
|---|---|---|
| Trino | Abrir o JDK 21.0.2 | - |
| Flink | Open JDK 11.0.21 | 2.12.7 |
| Spark | Open JDK 1.8.0_345 | 2.12.15 |
Essa versão prévia pública está disponível nas seguintes regiões.
Se você tiver mais dúvidas, entre em contato com o Suporte do Azure ou consulte a página de Opções de suporte. Se você tiver comentários específicos do produto, escreva-nos em aka.ms/askhdinsight.