Определение производительности кластера HDInsight HBase

Завершено

Ниже представлен порядок подготовки HDInsight HBase с новым интерфейсом на портале управления Azure.

  1. Перейдите на портал Azure по адресу portal.azure.com. Войдите, используя свои учетные данные Azure.

    Создание ресурса на портале Azure.

  2. Начнем с создания учетной записи хранилища блочных BLOB-объектов категории "Премиум". На странице "Создать" щелкните Хранилище.

    Создание учетной записи хранения на портале Azure.

  3. На странице "Создание учетной записи хранения" заполните указанные ниже поля.

    • Подписка: в поле должны автоматически указываться сведения о подписке.

    • Группа ресурсов: введите группу ресурсов для хранения развертывания HDInsight HBase.

    • Имя учетной записи хранения: введите имя учетной записи хранения для использования в кластере категории "Премиум".

    • Регион: введите название региона развертывания (убедитесь, что кластер и учетная запись хранения находятся в одном регионе).

    • Производительность: выберите "Премиум".

    • Тип учетной записи: BlockBlobStorage.

    • Репликация: локально избыточное хранилище (LRS).

    • Имя пользователя для входа в кластер: введите имя пользователя для администратора кластера (по умолчанию: admin).

      Экран учетной записи хранения на портале Azure.

  4. На всех остальных вкладках оставьте значения по умолчанию и нажмите Проверка и создание, чтобы создать учетную запись хранения.

  5. После создания учетной записи хранения щелкните Ключи доступа слева и скопируйте key1. Мы будем использовать его позже в процессе создания кластера.

    Экран со сведениями о ключах доступа к учетной записи хранения на портале Azure.

  6. Теперь можно приступать к развертыванию кластера HDInsight HBase с функцией ускоренной записи. Выберите Создать ресурс> -> Аналитика -> >HDInsight.

    Azure HDInsight на портале Azure.

  7. На вкладке "Основные сведения" заполните указанные ниже поля, чтобы создать кластер HBase.

    • Подписка: в поле должны автоматически указываться сведения о подписке.

    • Группа ресурсов: введите группу ресурсов для хранения развертывания HDInsight HBase.

    • Имя кластера: введите имя кластера. Если имя кластера доступно, появится зеленый флажок.

    • Регион: введите название региона развертывания.

    • Тип кластера: "Тип кластера" — "Версия — "HBase 2.0.0 (HDI 4.0)".

    • Имя пользователя для входа в кластер: введите имя пользователя для администратора кластера (по умолчанию: admin).

    • Пароль для входа в кластер: введите пароль для входа в кластер (по умолчанию: sshuser).

    • Подтверждение пароля для входа в кластер: подтвердите пароль, введенный на предыдущем шаге.

    • Имя пользователя Secure Shell (SSH): введите имя пользователя SSH для входа (по умолчанию: sshuser)

    • Использовать логин и пароль кластера при подключении через SSH: установите этот флажок, чтобы использовать один и тот же пароль для имен входа SSH и имен входа Ambari.

      Создание Azure HDInsight на портале Azure Portal.

  8. Нажмите "Далее: хранилище", чтобы перейти на вкладку "Хранилище", и заполните указанные ниже поля.

    • Тип основного хранилища: выберите "Служба хранилища Azure".

    • Метод выбора: выберите переключатель "Использовать ключ доступа".

    • Имя учетной записи хранения: введите имя учетной записи хранения блочного BLOB-объекта категории "Премиум", созданной ранее.

    • Ключ доступа: введите ключ доступа key1, скопированный ранее.

    • Контейнер: HDInsight должен предложить имя контейнера по умолчанию. Можно либо выбрать его, либо указать собственное имя.

      Определение учетной записи хранения на экране создания кластера HDInsight.

  9. Оставьте остальные параметры без изменения и прокрутите вниз, чтобы установить флажок "Включить ускоренную запись HBase". (Обратите внимание, что позже мы создадим второй кластер без ускоренной записи, используя те же действия, но флажок уже будет снят.)

    Включение ускоренной записи HBase на экране создания кластера HDInsight.

  10. Оставьте в колонке Безопасность и сеть параметры по умолчанию без изменений и перейдите на вкладку Конфигурация и цены.

  11. На вкладке Конфигурация и цены в разделе Конфигурация узла теперь имеется пункт Диски категории "Премиум" на рабочий узел.

  12. Для параметра "Узел региона" выберите 10, а для параметра "Размер узла" выберите DS14v2 (можно также выбрать меньшее количество и размер, однако следует убедиться, что оба кластера имеют одинаковое число узлов и номер SKU виртуальной машины, чтобы обеспечить равенство при сравнении).

    Настройка узлов на экране создания кластера HDInsight.

  13. Нажмите Далее: проверка и создание

  14. На вкладке "Проверка и создание" убедитесь, что в разделе Хранилище включен параметр Ускоренная запись HBase.

    Экран проверки создания кластера HDInsight.

  15. Нажмите Создать, чтобы начать развертывание первого кластера с ускоренной записью.

  16. Повторите эти же действия, чтобы создать второй кластер HDInsight HBase, но на этот раз без функции ускоренной записи. Обратите внимание на следующие изменения.

    • Укажите обычную учетную запись хранения BLOB-объектов, рекомендуемую по умолчанию.
    • Не устанавливайте флажок Включить ускоренную запись на вкладке "Хранилище".

    Страница

  17. На вкладке Конфигурация и цены для этого кластера обратите внимание на то, что в разделе Конфигурация узла ОТСУТСТВУЕТ элемент Диски категории "Премиум" на рабочий узел.

  18. Для параметра "Узел региона" выберите 10, а для параметра "Размер узла" выберите DS14v2. Также обратите внимание на отсутствие виртуальных машин серии DS, которые были ранее.

    Экран

  19. Нажмите Создать, чтобы начать развертывание второго кластера с ускоренной записью.

  20. Теперь после развертывания кластеров мы перейдем к настройке и запуску тестов YCSB для обоих кластеров.