Поделиться через

Версии Azure HDInsight

  • Статья

HDInsight объединяет компоненты с открытым исходным кодом и платформу HDInsight в пакет, развернутый в кластере. Дополнительные сведения см. в статье о принципе работы управления версиями HDInsight.

Поддерживаемые версии HDInsight

В этой таблице перечислены версии HDInsight, доступные на портале Azure и через другие методы развертывания, например PowerShell, CLI и пакет SDK для .NET.

Версия HDInsight ОС виртуальной машины Дата запуска в производство Тип поддержки Дата прекращения поддержки Дата выхода на пенсию Высокая доступность
HDInsight 5.1 Ubuntu 18.0.4 LTS 1 ноября 2023 г. Стандарт Не объявлено Не объявлено Да
HDInsight 5.0 Ubuntu 18.0.4 LTS 11 марта 2022 г. Базовая 31 марта 2025 г. 31 марта 2025 г. Да
HDInsight 4.0 Ubuntu 18.0.4 LTS 24 сентября 2018 г. Базовая 31 марта 2025 г. 31 марта 2025 г. Да

Прекращение поддержки означает, что корпорация Майкрософт больше не будет предоставлять поддержку для конкретной версии HDInsight. Возможно, вы не сможете создавать кластеры из портал Azure.

Выход на пенсию означает, что существующие кластеры версии HDInsight продолжают работать как есть. Вы не можете создавать новые кластеры этой версии с помощью каких-либо средств, включая интерфейс командной строки и пакеты SDK. Другие функции плоскости управления, такие как ручное масштабирование и автомасштабирование, не гарантируют работу после выхода на пенсию. Поддержка версий, использование которых прекращено, также не осуществляется.

Версии Spark, поддерживаемые в Azure HDInsight

Azure HDInsight поддерживает следующие версии Apache Spark.

Версии HDInsight Версия Apache Spark в HDInsight Дата запуска в производство Этап выпуска Дата окончания срока действия объявления Завершение стандартной поддержки Завершение базовой поддержки
4.0 2.4 8 июля 2019 г. Объявление об окончании жизненного цикла (EOLA) 10 февраля 2023 г. 10 августа 2023 г. 10 февраля 2024 г.
5,0 3.1 11 марта 2022 г. Общая доступность 28 марта 2024 г. 28 марта 2024 г. 31 марта 2025 г.
5.1 3,3 1 ноября 2023 г. Общая доступность - - -

Варианты поддержки для версий HDInsight

Период поддержки определяется как период времени, в течение которого версия HDInsight поддерживается службой поддержки клиентов Microsoft. В HDInsight предлагается два типа поддержки:

  • Стандартная поддержка
  • Базовая поддержка

Сводка о поддержке

Действие Поддержка уровня "Стандартный" Основная поддержка Выходное пособие
Использование существующего кластера без поддержки Да Да Да
Создание кластера Да Да Нет
Увеличение и уменьшение масштаба кластера Да Да Нет
Устранение неполадок со средой выполнения Да Нет Нет
Анализ первопричин (RCA) Да Нет Нет
Настройка производительности Да Нет Нет
Помощь в адаптации нового сотрудника Да Нет Нет
Основные проблемы и обновления Spark Да Нет Нет
Обновления безопасности и CVE Да Нет Нет

Стандартная поддержка

Стандартная поддержка предоставляет обновления и поддержку для кластеров HDInsight. Корпорация Майкрософт рекомендует создавать решения на основе последней полностью поддерживаемой версии.

Стандартная поддержка включает

  • Возможность создавать запросы на поддержку кластера.
  • Поддержка решений по устранению неполадок, созданных на основе кластеров.
  • запросы на перезапуск служб или узлов.
  • анализ первопричин по запросам на поддержку;
  • анализ первопричин или исправлений для повышения производительности заданий или запросов;
  • анализ первопричин или поиск исправлений для улучшений изменений, инициированных клиентом, в например, для изменения конфигураций служб или решения проблем, вызванных действиями пользовательского скрипта;
  • обновления продуктов для критически важных исправлений безопасности до выхода версии из обслуживания;
  • Ограниченные по области продуктовые обновления для поставщика ресурсов HDInsight.
  • Выборочные исправления или изменения в образах HDInsight или версиях компонентов программного обеспечения с открытым кодом (OSS).

Основная поддержка

Базовая поддержка предоставляет ограниченное обслуживание для поставщика ресурсов HDInsight. Образы HDInsight и компоненты ПО с открытым кодом (OSS) не будут обслуживаться. Только критические исправления безопасности исправлены в кластерах HDInsight.

Поддержка Basic включает в себя

  • Продолжающееся использование существующих кластеров.
  • Возможность для существующих клиентов HDInsight создавать новые кластеры в той же версии.
  • Возможность масштабирования кластеров вверх и вниз с помощью автомасштабирования или ручного масштабирования.
  • Специальные обновления продуктов для поставщика ресурсов HDInsight.
  • обновления продуктов для критически важных исправлений безопасности до выхода версии из обслуживания;
  • Возможность создавать запросы на поддержку кластера.
  • запросы на перезапуск служб или узлов.

Поддержка Basic не включает

  • Исправление или изменение образов HDInsight или версий компонентов программного обеспечения с открытым кодом (OSS).
  • Поддержка решений по устранению неполадок, созданных на основе версии кластера.
  • добавление новых функций или возможностей;
  • поддержка рекомендаций или специальных запросов;
  • анализ запросов на поддержку для определения первопричин
  • анализ первопричин или исправлений для повышения производительности заданий или запросов;
  • анализ первопричин или поиск исправлений для улучшений изменений, инициированных клиентом, в например, для изменения конфигураций служб или решения проблем, вызванных действиями пользовательского скрипта;

Корпорация Майкрософт не рекомендует создавать конвейеры аналитики или решения на основе кластеров с базовой поддержкой. Рекомендуется перенести существующие кластеры в последнюю полностью поддерживаемую версию.

Руководства по переходу с версии HDInsight 3.6 на версию 4.0

Заметки о выпуске

Дополнительные заметки о выпусках последних версий HDInsight см. здесь.

Особенности управления версиями

  • После развертывания кластера с изображением этот кластер не может автоматически обновиться до более новой версии образа. При создании новых кластеров развертывается последняя версия образа.
  • При переходе на новые версии HDInsight клиентам следует тестировать и проверять правильность работы приложений.
  • HDInsight оставляет за собой право изменить версию по умолчанию без предварительного уведомления. Если используется зависимость версии, укажите версию HDInsight при создании кластеров.
  • HDInsight может удалить версию компонента OSS перед выходом из эксплуатации версии HDInsight.

Следующие шаги