Поделиться через


Заметки о выпуске Azure HDInsight на AKS

Важный

Azure HDInsight на AKS снято с эксплуатации 31 января 2025 г. Узнайте больше из этого объявления.

Необходимо перенести рабочие нагрузки в Microsoft Fabric или эквивалентный продукт Azure, чтобы избежать резкого завершения рабочих нагрузок.

Важный

Эта функция сейчас доступна в предварительной версии. Дополнительные условия использования для предварительных версий Microsoft Azure включают дополнительные юридические термины, применимые к функциям Azure, которые находятся в бета-версии, в предварительной версии или в противном случае еще не выпущены в общую доступность. Сведения об этой конкретной предварительной версии см. в Azure HDInsight в предварительной версии AKS. Для вопросов или предложений по новым функциям отправьте запрос на AskHDInsight с подробными сведениями и подписывайтесь на обновления в Azure HDInsight Community.

В этой статье содержатся сведения о последних обновлениях выпуска AKS Azure HDInsight. Для получения информации о предыдущих выпусках см. архивные заметки о выпуске Azure HDInsight на AKS . Если вы хотите подписаться на заметки о выпуске, следите за выпусками этого репозитория GitHub .

Сводка

HDInsight в AKS — это современная, надежная, безопасная и полностью управляемая платформа как услуга (PaaS), которая работает в службе Azure Kubernetes (AKS). HDInsight в AKS позволяет развертывать такие популярные аналитические рабочие нагрузки Open-Source, как Apache Spark™, Apache Flink®️ и Trino, без дополнительных усилий на управление и мониторинг контейнеров.

Вы можете создавать приложения для больших данных, масштаба в петабайты, включающие потоковую передачу через Apache Flink, инженеринг данных и машинное обучение с использованием Apache Spark и мощного механизма запросов Trino.

Все эти возможности, в сочетании с HDInsight и сильной ориентацией AKS на разработчиков, позволяют предприятиям и компаниям цифровой экономики с высоким уровнем технической экспертизы создавать и эксплуатировать приложения, которые адекватно удовлетворяют их потребности. HDInsight в AKS позволяет разработчикам получать доступ ко всем богатым конфигурациям, предоставляемым программным обеспечением с открытым исходным кодом, и расширяемостью, чтобы легко включить другие предложения экосистемы. Это предложение позволяет разработчикам тестировать и настраивать свои приложения, чтобы извлечь оптимальную производительность при оптимальной стоимости.

Заметка

Чтобы разобраться в версиях и поддержке HDInsight на AKS, обратитесь к схеме управления версиями .

Вы можете ознакомиться на странице «Что нового» , чтобы получить полную информацию о функциях, которые в настоящее время находятся в общедоступной предварительной версии в этом выпуске.

Важный

HDInsight в AKS использует безопасные методики развертывания, которые включают постепенное развертывание региона. Для нового выпуска или новой версии в всех регионах может потребоваться до 10 рабочих дней.

Сведения о выпуске

Дата выпуска: 05 сентября 2024 г.

этот выпуск применяется к следующим

  • Версия пула кластеров: 1.2
  • Версия кластера: 1.2.1
  • ВЕРСИЯ AKS: 1.27

Обновлено

Последняя версия API выглядит следующим образом.

https://github.com/Azure/azure-rest-api-specs/blob/main/specification/hdinsight/resource-manager/Microsoft.HDInsight/HDInsightOnAks/preview/2024-05-01-preview/hdinsight.json.

Важный

Чтобы воспользоваться всеми этими новейшими функциями, необходимо создать новый пул кластеров с версией 1.2 и кластером версии 1.2.1.

Известные проблемы

  • Ограничение идентификации рабочей нагрузки :
    • Существует известное ограничение при переходе на удостоверение рабочей нагрузки. Это ограничение обусловлено чувствительным к разрешениям характером операций FIC. Пользователи не могут выполнить удаление кластера, удалив группу ресурсов. Запросы на удаление кластера должны инициироваться приложением/пользователем/субъектом с разрешениями FIC/delete. В случае сбоя удаления FIC удаление кластера высокого уровня также не удаётся.
    • Поддержка управляемых удостоверений пользователей (UAMI) — на каждое UAMI установлено ограничение в 20 FICs. В удостоверении можно создать только 20 федеративных учетных данных. В HDInsight в кластере AKS FIC (учетные данные федеративного удостоверения) и SA имеют сопоставление "один к одному", а для MSI можно создать только 20 SAS. Если вы хотите создать больше кластеров, вам потребуется предоставить другие MSI-файлы для преодоления ограничений.
    • Создание федеративных учетных данных в настоящее время не поддерживается для пользовательских управляемых удостоверений, созданных в этих регионах

Версия операционной системы

  • Mariner OS 2.0

версии рабочей нагрузки

Загруженность Версия
Трино 440
Flink 1.17.0
Apache Spark 3.4

поддерживаемые версии Java и Scala

Загруженность Ява Scala
Трино Открытие JDK 21.0.2
Flink OpenJDK 11.0.21 2.12.7
Искра OpenJDK 1.8.0_345 2.12.15

Предварительная версия доступна в следующих регионах .

Если у вас есть дополнительные вопросы, обратитесь в службу поддержки Azure или перейдите на страницу вариантов поддержки. Если у вас есть отзывы, связанные с продуктом, вы можете написать нам на aka.ms/askhdinsight.

Дальнейшие действия