管理群集

重要

AKS 上的 Azure HDInsight 已于 2025 年 1 月 31 日停用。 了解更多 内容,请参阅此公告

需要将工作负荷迁移到 Microsoft Fabric 或等效的 Azure 产品,以避免工作负荷突然终止。

重要

此功能目前以预览版提供。 Microsoft Azure 预览版补充使用条款 包括适用于测试版、预览版或尚未正式发布的 Azure 功能的更多法律条款。 有关此特定预览版的信息,请参阅 AKS 上的 Azure HDInsight 预览信息。 有关问题或功能建议,请在 AskHDInsight 上提交请求,提供详细信息,并关注我们以获取 Azure HDInsight 社区 的更多更新。

群集是单个计算工作负载,例如 Apache Spark、Apache Flink 和 Trino,可在几分钟内快速创建,只需预设配置和单击几下即可。

本文介绍如何使用 Azure 门户管理群集。

备注

需要有一个可操作的集群,并了解如何创建 集群

入门

  1. 登录 Azure 门户

  2. 在 Azure 门户搜索栏中,键入“AKS 群集上的 HDInsight”,然后从下拉列表中选择“AKS 群集上的 Azure HDInsight”。

    屏幕截图,显示在 AKS 群集上开始使用 HDInsight 的搜索选项。

  3. 从列表页中选择群集名称。

    显示从列表中选择所需的 AKS 群集上的 HDInsight 的屏幕截图。

查看群集详细信息

可以在群集的“概述”边栏选项卡中查看群集详细信息。 它提供一般信息并轻松访问属于群集的工具。

财产 描述
资源组 在其中创建群集的资源组。
群集池名称 用于创建群集的群集池名称。
群集类型 群集的类型,例如 Spark、Trino 或 Flink。
AKS 版本的 HDInsight AKS 群集版本的 HDInsight。 有关详细信息,请参阅 版本
群集终结点 群集的终结点。
群集包 与群集关联的组件版本。
订阅详细信息 订阅名称和订阅 ID。
位置 群集部署的区域。
群集大小详细信息 节点大小、节点类型和节点数。

屏幕截图,其中显示了 AKS 群集上的 HDInsight 上的所有群集设置概述。

管理群集大小

可以使用 Azure 门户中的“群集大小”边栏选项卡检查和修改群集的工作器节点数。 有两个选项可用于纵向扩展/缩减群集:

屏幕截图,其中显示了 AKS 群集上的 HDInsight 上的群集大小边栏选项卡。

管理群集访问

AKS 上的 HDInsight 在控制平面和数据平面上提供全面的精细访问控制,使你能够管理群集资源并提供对群集数据平面的访问。

了解如何 管理对群集的访问权限。

配置安全外壳 (SSH)

安全外壳(SSH)允许直接将作业和查询提交到群集。 可以使用 Azure 门户中的“安全外壳(SSH)”边栏选项卡启用或禁用 SSH。

注意

启用 SSH 将在群集中创建其他 VM。 允许的最大安全 shell 节点数为 5。

屏幕截图,显示 AKS 群集上的 HDInsight 的 SSH 窗格。

管理群集配置

使用 AKS 上的 HDInsight,可以调整配置属性以提高具有特定设置的群集的性能。 例如,使用情况或内存设置。 在 Azure 门户中,使用群集的“配置管理”边栏选项卡来管理配置。

可以执行以下操作:

  • 更新现有服务配置或添加新配置。
  • 使用 RestAPI 导出服务配置。

了解如何管理 群集配置

查看服务详细信息

在 Azure 门户中,使用群集中的“服务”边栏选项卡检查群集中运行的服务的运行状况。 它包括服务的集合以及群集中运行的每个服务的状态。 可以深入查看每个服务,以检查实例级别的详细信息。

了解如何检查 服务运行状况

启用与 Azure 服务的集成

在 Azure 门户中,使用群集池中的“集成”边栏选项卡来配置支持的 Azure 服务。 目前,我们支持 Log Analytics 和 Azure 托管的 Prometheus 和 Grafana,需要在群集池级别进行配置,然后才能在群集级别启用。

屏幕截图,显示 AKS 群集上 HDInsight 和 Log Analytics 的群集集成。

删除群集

删除群集不会删除默认存储帐户或任何链接的存储帐户。 可以使用相同的存储帐户和相同的元存储重新创建群集。

在 Azure 门户中的“概述”边栏选项卡中:

  1. 从顶部菜单中选择 删除

    屏幕截图,显示如何在 AKS 群集上删除 HDInsight 上的群集。

  2. 可以在“通知”图标上查看状态。这是 Azure 门户中“通知”图标的屏幕截图。