Apache Superset™ 배포

아티클
09/20/2024

중요하다

AKS의 Azure HDInsight는 2025년 1월 31일에 사용 중지되었습니다. 이 공지 을 통해에 대해 자세히 알아보세요.

워크로드가 갑자기 종료되는 것을 방지하기 위해 워크로드를 Microsoft Fabric 또는 동등한 Azure 제품으로 워크로드를 마이그레이션해야 합니다.

중요하다

이 기능은 현재 미리 보기로 제공됩니다. Microsoft Azure 미리 보기의 추가 사용 약관에는 베타, 미리 보기 중이거나 아직 일반 제공으로 출시되지 않은 Azure 기능에 적용되는 추가적인 법적 조건이 포함되어 있습니다. 이 특정 미리 보기에 대한 자세한 내용은 AKS 미리 보기 정보 azure HDInsight참조하세요. 질문이나 기능 제안이 있으신 경우, 자세한 내용을 포함하여 AskHDInsight에 요청을 제출해 주세요. 더 많은 업데이트를 받으시려면 Azure HDInsight Community를 팔로우해 주세요.

시각화는 데이터를 효과적으로 탐색하고, 제시하고, 공유하는 데 필수적입니다. Apache Superset 사용하면 유연한 웹 UI에서 데이터를 통해 쿼리를 실행하고, 시각화하고, 대시보드를 빌드할 수 있습니다.

이 문서에서는 Azure에서 Apache Superset UI 인스턴스를 배포하고 AKS의 HDInsight를 사용하여 Trino 클러스터에 연결하여 데이터를 쿼리하고 대시보드를 만드는 방법을 설명합니다.

이 문서에서 다루는 단계 요약:

전제 조건.
Apache Superset을 위한 Kubernetes 클러스터 생성.
Apache Superset배포합니다.

필수 구성 요소

Windows를 사용하는 경우 WSL2 Ubuntu를 사용하여 Windows 내의 bash 셸 Linux 환경에서 이러한 지침을 실행합니다. 그렇지 않으면 Windows에서 작동하도록 명령을 수정해야 합니다.

Trino 클러스터 만들기 및 관리 ID 할당

아직 생성하지 않았다면, AKS 의 HDInsight를 사용하여Trino 클러스터를 만드세요.
Apache Superset이 Trino를 호출하려면 MSI(관리 ID)가 있어야 합니다. 기존 사용자 할당 관리 ID만들거나 선택합니다.
2단계에서 만든 관리 ID가 쿼리를 실행할 수 있도록 Trino 클러스터 구성을 수정합니다. 액세스관리하는 방법을 알아봅니다.

로컬 도구 설치

Azure CLI를 설정합니다.

a. Azure CLI 설치합니다.

b. Azure CLI에 로그인을 합니다: az login.

c. Azure CLI 미리 보기 확장을 설치합니다.

# Install the aks-preview extension
az extension add --name aks-preview

# Update the extension to make sure you've the latest version installed
az extension update --name aks-preview

Kubernetes설치합니다.
Helm설치합니다.

Apache Superset용 kubernetes 클러스터 만들기

이 단계에서는 Apache Superset을 설치할 수 있는 AKS(Azure Kubernetes Service) 클러스터를 만듭니다. Superset이 해당 ID를 사용하여 Trino 클러스터로 인증할 수 있도록 클러스터에 연결한 관리 ID를 바인딩해야 합니다.

Superset 설치를 위해 bash에서 다음 변수를 만듭니다.

# ----- Parameters ------

# The subscription ID where you want to install Superset
SUBSCRIPTION=
# Superset cluster name (visible only to you)
CLUSTER_NAME=trinosuperset 
# Resource group containing the Azure Kubernetes service
RESOURCE_GROUP_NAME=trinosuperset 
# The region to deploy Superset (ideally same region as Trino): to list regions: az account list-locations REGION=westus3 
# The resource path of your managed identity. To get this resource path:
#   1. Go to the Azure Portal and find your user assigned managed identity
#   2. Select JSON View on the top right
#   3. Copy the Resource ID value.
MANAGED_IDENTITY_RESOURCE=

Superset을 설치할 구독을 선택합니다.
```
az account set --subscription $SUBSCRIPTION
```

현재 구독에서 Pod ID 기능을 사용하도록 설정합니다.

az feature register --name EnablePodIdentityPreview --namespace Microsoft.ContainerService
az provider register -n Microsoft.ContainerService

Superset을 배포할 AKS 클러스터를 만듭니다.

# Create resource group
az group create --location $REGION --name $RESOURCE_GROUP_NAME

# Create AKS cluster
az \
aks create \
-g $RESOURCE_GROUP_NAME \
-n $CLUSTER_NAME \
--node-vm-size Standard_DS2_v2 \
--node-count 3 \
--enable-managed-identity \
--assign-identity $MANAGED_IDENTITY_RESOURCE \
--assign-kubelet-identity $MANAGED_IDENTITY_RESOURCE

# Set the context of your new Kubernetes cluster
az aks get-credentials --resource-group $RESOURCE_GROUP_NAME --name $CLUSTER_NAME