Udostępnij za pośrednictwem


Microsoft.MachineLearningServices workspaces/onlineEndpoints/deployments 2022-10-01

Definicja zasobu Bicep

Typ zasobu obszary robocze/onlineEndpoints/deployments można wdrożyć przy użyciu operacji docelowych:

Aby uzyskać listę zmienionych właściwości w każdej wersji interfejsu API, zobacz dziennika zmian.

Format zasobu

Aby utworzyć zasób Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments, dodaj następujący kod Bicep do szablonu.

resource symbolicname 'Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments@2022-10-01' = {
  identity: {
    type: 'string'
    userAssignedIdentities: {
      {customized property}: {}
    }
  }
  kind: 'string'
  location: 'string'
  name: 'string'
  properties: {
    appInsightsEnabled: bool
    codeConfiguration: {
      codeId: 'string'
      scoringScript: 'string'
    }
    description: 'string'
    egressPublicNetworkAccess: 'string'
    environmentId: 'string'
    environmentVariables: {
      {customized property}: 'string'
    }
    instanceType: 'string'
    livenessProbe: {
      failureThreshold: int
      initialDelay: 'string'
      period: 'string'
      successThreshold: int
      timeout: 'string'
    }
    model: 'string'
    modelMountPath: 'string'
    properties: {
      {customized property}: 'string'
    }
    readinessProbe: {
      failureThreshold: int
      initialDelay: 'string'
      period: 'string'
      successThreshold: int
      timeout: 'string'
    }
    requestSettings: {
      maxConcurrentRequestsPerInstance: int
      maxQueueWait: 'string'
      requestTimeout: 'string'
    }
    scaleSettings: {
      scaleType: 'string'
      // For remaining properties, see OnlineScaleSettings objects
    }
    endpointComputeType: 'string'
    // For remaining properties, see OnlineDeploymentProperties objects
  }
  sku: {
    capacity: int
    family: 'string'
    name: 'string'
    size: 'string'
    tier: 'string'
  }
  tags: {
    {customized property}: 'string'
  }
}

Obiekty OnlineScaleSettings

Ustaw właściwość scaleType, aby określić typ obiektu.

W przypadku domyślnejużyj:

{
  scaleType: 'Default'
}

W przypadku TargetUscsiużyj:

{
  maxInstances: int
  minInstances: int
  pollingInterval: 'string'
  scaleType: 'TargetUtilization'
  targetUtilizationPercentage: int
}

Obiekty OnlineDeploymentProperties

Ustaw właściwość endpointComputeType, aby określić typ obiektu.

W przypadku Kubernetes użyj:

{
  containerResourceRequirements: {
    containerResourceLimits: {
      cpu: 'string'
      gpu: 'string'
      memory: 'string'
    }
    containerResourceRequests: {
      cpu: 'string'
      gpu: 'string'
      memory: 'string'
    }
  }
  endpointComputeType: 'Kubernetes'
}

W przypadku zarządzanychużyj:

{
  endpointComputeType: 'Managed'
}

Wartości właściwości

Konfiguracja kodu

Nazwa Opis Wartość
codeId Identyfikator zasobu usługi ARM zasobu kodu. struna
scoringScript [Wymagane] Skrypt do wykonania podczas uruchamiania. Np. "score.py" struna

Ograniczenia:
Minimalna długość = 1
Wzorzec = [a-zA-Z0-9_] (wymagane)

ContainerResourceRequirements

Nazwa Opis Wartość
containerResourceLimits Informacje o limicie zasobów kontenera: ContainerResourceSettings
containerResourceRequests Informacje o żądaniu zasobu kontenera: ContainerResourceSettings

ContainerResourceSettings

Nazwa Opis Wartość
procesor Liczba żądań/limitu procesorów wirtualnych dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna
Gpu Liczba żądań/limitów kart procesora GPU firmy Nvidia dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna
pamięć Żądanie/limit rozmiaru pamięci dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna

DefaultScaleSettings

Nazwa Opis Wartość
scaleType [Wymagane] Typ algorytmu skalowania wdrożenia "Wartość domyślna" (wymagana)

EndpointDeploymentPropertiesBaseEnvironmentVariables

Nazwa Opis Wartość

EndpointDeploymentPropertiesBaseProperties

Nazwa Opis Wartość

KubernetesOnlineDeployment

Nazwa Opis Wartość
containerResourceRequirements Wymagania dotyczące zasobów dla kontenera (procesor i pamięć). ContainerResourceRequirements
endpointComputeType [Wymagane] Typ obliczeniowy punktu końcowego. "Kubernetes" (wymagane)

ManagedOnlineDeployment

Nazwa Opis Wartość
endpointComputeType [Wymagane] Typ obliczeniowy punktu końcowego. "Zarządzane" (wymagane)

ManagedServiceIdentity

Nazwa Opis Wartość
typ Typ tożsamości usługi zarządzanej (gdzie dozwolone są typy SystemAssigned i UserAssigned). "Brak"
"SystemAssigned"
"SystemAssigned,UserAssigned"
"UserAssigned" (wymagane)
userAssignedIdentities Zestaw tożsamości przypisanych przez użytkownika skojarzonych z zasobem. Klucze słownika userAssignedIdentities będą identyfikatorami zasobów usługi ARM w postaci: "/subscriptions/{subscriptionId}/resourceGroups/{resourceGroupName}/providers/Microsoft.ManagedIdentity/userAssignedIdentities/{identityName}. Wartości słownika mogą być pustymi obiektami ({}) w żądaniach. UserAssignedIdentities

Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments

Nazwa Opis Wartość
tożsamość Tożsamość usługi zarządzanej (tożsamości przypisane przez system i/lub tożsamości przypisane przez użytkownika) ManagedServiceIdentity
rodzaj Metadane używane przez portal/narzędzia/itp. do renderowania różnych środowisk środowiska użytkownika dla zasobów tego samego typu. struna
lokalizacja Lokalizacja geograficzna, w której znajduje się zasób ciąg (wymagany)
nazwa Nazwa zasobu struna

Ograniczenia:
Wzorzec = ^[a-zA-Z0-9][a-zA-Z0-9\-_]{0,254}$ (wymagane)
rodzic W Bicep można określić zasób nadrzędny dla zasobu podrzędnego. Tę właściwość należy dodać tylko wtedy, gdy zasób podrzędny jest zadeklarowany poza zasobem nadrzędnym.

Aby uzyskać więcej informacji, zobacz Zasób podrzędny poza zasobem nadrzędnym.
Nazwa symboliczna zasobu typu: obszarów roboczych/onlineEndpoints
Właściwości [Wymagane] Dodatkowe atrybuty jednostki. OnlineDeploymentProperties (wymagane)
Numer jednostki magazynowej Szczegóły jednostki SKU wymagane dla kontraktu usługi ARM na potrzeby skalowania automatycznego. sku
Tagi Tagi zasobów Słownik nazw tagów i wartości. Zobacz tagi w szablonach

Właściwości elementu OnlineDeploymentProperties

Nazwa Opis Wartość
appInsightsEnabled Jeśli wartość true, włącza rejestrowanie usługi Application Insights. Bool
codeConfiguration Konfiguracja kodu dla wdrożenia punktu końcowego. CodeConfiguration
opis Opis wdrożenia punktu końcowego. struna
egressPublicNetworkAccess W przypadku włączenia zezwalaj na dostęp do sieci publicznej ruchu wychodzącego. Jeśli opcja Wyłączone, spowoduje to utworzenie bezpiecznego ruchu wychodzącego. Ustawienie domyślne: włączone. "Wyłączone"
"Włączone"
endpointComputeType Ustaw wartość "Kubernetes" dla typu KubernetesOnlineDeployment. Ustaw wartość "Managed" dla typu ManagedOnlineDeployment. "Kubernetes"
"Zarządzane" (wymagane)
environmentId Identyfikator zasobu usługi ARM lub identyfikator zasobu specyfikacji środowiska dla wdrożenia punktu końcowego. struna
environmentVariables Konfiguracja zmiennych środowiskowych dla wdrożenia. EndpointDeploymentPropertiesBaseEnvironmentVariables
instanceType Typ wystąpienia obliczeniowego. struna
livenessProbe Sonda liveness regularnie monitoruje kondycję kontenera. ProbeSettings
model Ścieżka identyfikatora URI do modelu. struna
modelMountPath Ścieżka do zainstalowania modelu w kontenerze niestandardowym. struna
Właściwości Słownik właściwości. Właściwości można dodawać, ale nie usuwać ani zmieniać. EndpointDeploymentPropertiesBaseProperties
gotowośćProbe Sonda gotowości sprawdza, czy kontener jest gotowy do obsługi ruchu. Właściwości i wartości domyślne są takie same jak sonda aktualności. ProbeSettings
requestSettings Zażądaj ustawień wdrożenia. OnlineRequestSettings
scaleSettings Ustawienia skalowania wdrożenia.
Jeśli ma wartość null lub nie jest podana,
wartość domyślna to TargetUscsiScaleSettings for KubernetesOnlineDeployment
i na Wartość DefaultScaleSettings dla elementu ManagedOnlineDeployment.
OnlineScaleSettings

OnlineRequestSettings

Nazwa Opis Wartość
maxConcurrentRequestsPerInstance Maksymalna liczba współbieżnych żądań na węzeł dozwolonych na wdrożenie. Wartość domyślna to 1. Int
maxQueueWait Maksymalny czas, przez jaki żądanie pozostanie w kolejce w formacie ISO 8601.
Wartość domyślna to 500 ms.
struna
requestTimeout Limit czasu oceniania w formacie ISO 8601.
Wartość domyślna to 5000 ms.
struna

OnlineScaleSettings

Nazwa Opis Wartość
scaleType Ustaw wartość "Default" dla typu DefaultScaleSettings. Dla typu TargetUscsiScaleSettingsustaw wartość "TargetUscsi" na wartość . "Wartość domyślna"
"TargetUscsi" (wymagane)

ProbeSettings

Nazwa Opis Wartość
failureThreshold Liczba niepowodzeń, które mają być dozwolone przed zwróceniem stanu złej kondycji. Int
initialDelay Opóźnienie przed pierwszą sondą w formacie ISO 8601. struna
okres Czas między sondami w formacie ISO 8601. struna
successThreshold Liczba pomyślnych sond przed zwróceniem stanu dobrej kondycji. Int
Limit czasu Limit czasu sondy w formacie ISO 8601. struna

Numer jednostki magazynowej

Nazwa Opis Wartość
pojemność Jeśli jednostka SKU obsługuje skalowanie w poziomie/w, należy uwzględnić liczbę całkowitą pojemności. Jeśli skalowanie w poziomie/w nie jest możliwe dla zasobu, może to zostać pominięte. Int
rodzina Jeśli usługa ma różne generacje sprzętu, dla tej samej jednostki SKU, można je przechwycić tutaj. struna
nazwa Nazwa jednostki SKU. Ex - P3. Zazwyczaj jest to kod z literą i cyfrą ciąg (wymagany)
rozmiar Rozmiar jednostki SKU. Gdy pole nazwy jest kombinacją warstwy i innej wartości, będzie to autonomiczny kod. struna
kondygnacja To pole jest wymagane do zaimplementowania przez dostawcę zasobów, jeśli usługa ma więcej niż jedną warstwę, ale nie jest wymagana w put. "Podstawowa"
"Bezpłatna"
"Premium"
"Standardowa"

TargetUscsiScaleSettings

Nazwa Opis Wartość
maxInstances Maksymalna liczba wystąpień, do których można skalować wdrożenie. Limit przydziału zostanie zarezerwowany dla max_instances. Int
minInstances Minimalna liczba wystąpień, które mają być zawsze obecne. Int
pollingInterval Interwał sondowania w formacie ISO 8691. Obsługuje tylko czas trwania z dokładnością do sekund. struna
scaleType [Wymagane] Typ algorytmu skalowania wdrożenia "TargetUscsi" (wymagane)
targetU enterprisePercentage Docelowe użycie procesora CPU dla narzędzia do skalowania automatycznego. Int

TrackedResourceTags

Nazwa Opis Wartość

UserAssignedIdentities

Nazwa Opis Wartość

UserAssignedIdentity

Nazwa Opis Wartość

Definicja zasobu szablonu usługi ARM

Typ zasobu obszary robocze/onlineEndpoints/deployments można wdrożyć przy użyciu operacji docelowych:

Aby uzyskać listę zmienionych właściwości w każdej wersji interfejsu API, zobacz dziennika zmian.

Format zasobu

Aby utworzyć zasób Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments, dodaj następujący kod JSON do szablonu.

{
  "type": "Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments",
  "apiVersion": "2022-10-01",
  "name": "string",
  "identity": {
    "type": "string",
    "userAssignedIdentities": {
      "{customized property}": {
      }
    }
  },
  "kind": "string",
  "location": "string",
  "properties": {
    "appInsightsEnabled": "bool",
    "codeConfiguration": {
      "codeId": "string",
      "scoringScript": "string"
    },
    "description": "string",
    "egressPublicNetworkAccess": "string",
    "environmentId": "string",
    "environmentVariables": {
      "{customized property}": "string"
    },
    "instanceType": "string",
    "livenessProbe": {
      "failureThreshold": "int",
      "initialDelay": "string",
      "period": "string",
      "successThreshold": "int",
      "timeout": "string"
    },
    "model": "string",
    "modelMountPath": "string",
    "properties": {
      "{customized property}": "string"
    },
    "readinessProbe": {
      "failureThreshold": "int",
      "initialDelay": "string",
      "period": "string",
      "successThreshold": "int",
      "timeout": "string"
    },
    "requestSettings": {
      "maxConcurrentRequestsPerInstance": "int",
      "maxQueueWait": "string",
      "requestTimeout": "string"
    },
    "scaleSettings": {
      "scaleType": "string"
      // For remaining properties, see OnlineScaleSettings objects
    },
    "endpointComputeType": "string"
    // For remaining properties, see OnlineDeploymentProperties objects
  },
  "sku": {
    "capacity": "int",
    "family": "string",
    "name": "string",
    "size": "string",
    "tier": "string"
  },
  "tags": {
    "{customized property}": "string"
  }
}

Obiekty OnlineScaleSettings

Ustaw właściwość scaleType, aby określić typ obiektu.

W przypadku domyślnejużyj:

{
  "scaleType": "Default"
}

W przypadku TargetUscsiużyj:

{
  "maxInstances": "int",
  "minInstances": "int",
  "pollingInterval": "string",
  "scaleType": "TargetUtilization",
  "targetUtilizationPercentage": "int"
}

Obiekty OnlineDeploymentProperties

Ustaw właściwość endpointComputeType, aby określić typ obiektu.

W przypadku Kubernetes użyj:

{
  "containerResourceRequirements": {
    "containerResourceLimits": {
      "cpu": "string",
      "gpu": "string",
      "memory": "string"
    },
    "containerResourceRequests": {
      "cpu": "string",
      "gpu": "string",
      "memory": "string"
    }
  },
  "endpointComputeType": "Kubernetes"
}

W przypadku zarządzanychużyj:

{
  "endpointComputeType": "Managed"
}

Wartości właściwości

Konfiguracja kodu

Nazwa Opis Wartość
codeId Identyfikator zasobu usługi ARM zasobu kodu. struna
scoringScript [Wymagane] Skrypt do wykonania podczas uruchamiania. Np. "score.py" struna

Ograniczenia:
Minimalna długość = 1
Wzorzec = [a-zA-Z0-9_] (wymagane)

ContainerResourceRequirements

Nazwa Opis Wartość
containerResourceLimits Informacje o limicie zasobów kontenera: ContainerResourceSettings
containerResourceRequests Informacje o żądaniu zasobu kontenera: ContainerResourceSettings

ContainerResourceSettings

Nazwa Opis Wartość
procesor Liczba żądań/limitu procesorów wirtualnych dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna
Gpu Liczba żądań/limitów kart procesora GPU firmy Nvidia dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna
pamięć Żądanie/limit rozmiaru pamięci dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna

DefaultScaleSettings

Nazwa Opis Wartość
scaleType [Wymagane] Typ algorytmu skalowania wdrożenia "Wartość domyślna" (wymagana)

EndpointDeploymentPropertiesBaseEnvironmentVariables

Nazwa Opis Wartość

EndpointDeploymentPropertiesBaseProperties

Nazwa Opis Wartość

KubernetesOnlineDeployment

Nazwa Opis Wartość
containerResourceRequirements Wymagania dotyczące zasobów dla kontenera (procesor i pamięć). ContainerResourceRequirements
endpointComputeType [Wymagane] Typ obliczeniowy punktu końcowego. "Kubernetes" (wymagane)

ManagedOnlineDeployment

Nazwa Opis Wartość
endpointComputeType [Wymagane] Typ obliczeniowy punktu końcowego. "Zarządzane" (wymagane)

ManagedServiceIdentity

Nazwa Opis Wartość
typ Typ tożsamości usługi zarządzanej (gdzie dozwolone są typy SystemAssigned i UserAssigned). "Brak"
"SystemAssigned"
"SystemAssigned,UserAssigned"
"UserAssigned" (wymagane)
userAssignedIdentities Zestaw tożsamości przypisanych przez użytkownika skojarzonych z zasobem. Klucze słownika userAssignedIdentities będą identyfikatorami zasobów usługi ARM w postaci: "/subscriptions/{subscriptionId}/resourceGroups/{resourceGroupName}/providers/Microsoft.ManagedIdentity/userAssignedIdentities/{identityName}. Wartości słownika mogą być pustymi obiektami ({}) w żądaniach. UserAssignedIdentities

Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments

Nazwa Opis Wartość
apiVersion Wersja interfejsu API '2022-10-01'
tożsamość Tożsamość usługi zarządzanej (tożsamości przypisane przez system i/lub tożsamości przypisane przez użytkownika) ManagedServiceIdentity
rodzaj Metadane używane przez portal/narzędzia/itp. do renderowania różnych środowisk środowiska użytkownika dla zasobów tego samego typu. struna
lokalizacja Lokalizacja geograficzna, w której znajduje się zasób ciąg (wymagany)
nazwa Nazwa zasobu struna

Ograniczenia:
Wzorzec = ^[a-zA-Z0-9][a-zA-Z0-9\-_]{0,254}$ (wymagane)
Właściwości [Wymagane] Dodatkowe atrybuty jednostki. OnlineDeploymentProperties (wymagane)
Numer jednostki magazynowej Szczegóły jednostki SKU wymagane dla kontraktu usługi ARM na potrzeby skalowania automatycznego. sku
Tagi Tagi zasobów Słownik nazw tagów i wartości. Zobacz tagi w szablonach
typ Typ zasobu "Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments"

Właściwości elementu OnlineDeploymentProperties

Nazwa Opis Wartość
appInsightsEnabled Jeśli wartość true, włącza rejestrowanie usługi Application Insights. Bool
codeConfiguration Konfiguracja kodu dla wdrożenia punktu końcowego. CodeConfiguration
opis Opis wdrożenia punktu końcowego. struna
egressPublicNetworkAccess W przypadku włączenia zezwalaj na dostęp do sieci publicznej ruchu wychodzącego. Jeśli opcja Wyłączone, spowoduje to utworzenie bezpiecznego ruchu wychodzącego. Ustawienie domyślne: włączone. "Wyłączone"
"Włączone"
endpointComputeType Ustaw wartość "Kubernetes" dla typu KubernetesOnlineDeployment. Ustaw wartość "Managed" dla typu ManagedOnlineDeployment. "Kubernetes"
"Zarządzane" (wymagane)
environmentId Identyfikator zasobu usługi ARM lub identyfikator zasobu specyfikacji środowiska dla wdrożenia punktu końcowego. struna
environmentVariables Konfiguracja zmiennych środowiskowych dla wdrożenia. EndpointDeploymentPropertiesBaseEnvironmentVariables
instanceType Typ wystąpienia obliczeniowego. struna
livenessProbe Sonda liveness regularnie monitoruje kondycję kontenera. ProbeSettings
model Ścieżka identyfikatora URI do modelu. struna
modelMountPath Ścieżka do zainstalowania modelu w kontenerze niestandardowym. struna
Właściwości Słownik właściwości. Właściwości można dodawać, ale nie usuwać ani zmieniać. EndpointDeploymentPropertiesBaseProperties
gotowośćProbe Sonda gotowości sprawdza, czy kontener jest gotowy do obsługi ruchu. Właściwości i wartości domyślne są takie same jak sonda aktualności. ProbeSettings
requestSettings Zażądaj ustawień wdrożenia. OnlineRequestSettings
scaleSettings Ustawienia skalowania wdrożenia.
Jeśli ma wartość null lub nie jest podana,
wartość domyślna to TargetUscsiScaleSettings for KubernetesOnlineDeployment
i na Wartość DefaultScaleSettings dla elementu ManagedOnlineDeployment.
OnlineScaleSettings

OnlineRequestSettings

Nazwa Opis Wartość
maxConcurrentRequestsPerInstance Maksymalna liczba współbieżnych żądań na węzeł dozwolonych na wdrożenie. Wartość domyślna to 1. Int
maxQueueWait Maksymalny czas, przez jaki żądanie pozostanie w kolejce w formacie ISO 8601.
Wartość domyślna to 500 ms.
struna
requestTimeout Limit czasu oceniania w formacie ISO 8601.
Wartość domyślna to 5000 ms.
struna

OnlineScaleSettings

Nazwa Opis Wartość
scaleType Ustaw wartość "Default" dla typu DefaultScaleSettings. Dla typu TargetUscsiScaleSettingsustaw wartość "TargetUscsi" na wartość . "Wartość domyślna"
"TargetUscsi" (wymagane)

ProbeSettings

Nazwa Opis Wartość
failureThreshold Liczba niepowodzeń, które mają być dozwolone przed zwróceniem stanu złej kondycji. Int
initialDelay Opóźnienie przed pierwszą sondą w formacie ISO 8601. struna
okres Czas między sondami w formacie ISO 8601. struna
successThreshold Liczba pomyślnych sond przed zwróceniem stanu dobrej kondycji. Int
Limit czasu Limit czasu sondy w formacie ISO 8601. struna

Numer jednostki magazynowej

Nazwa Opis Wartość
pojemność Jeśli jednostka SKU obsługuje skalowanie w poziomie/w, należy uwzględnić liczbę całkowitą pojemności. Jeśli skalowanie w poziomie/w nie jest możliwe dla zasobu, może to zostać pominięte. Int
rodzina Jeśli usługa ma różne generacje sprzętu, dla tej samej jednostki SKU, można je przechwycić tutaj. struna
nazwa Nazwa jednostki SKU. Ex - P3. Zazwyczaj jest to kod z literą i cyfrą ciąg (wymagany)
rozmiar Rozmiar jednostki SKU. Gdy pole nazwy jest kombinacją warstwy i innej wartości, będzie to autonomiczny kod. struna
kondygnacja To pole jest wymagane do zaimplementowania przez dostawcę zasobów, jeśli usługa ma więcej niż jedną warstwę, ale nie jest wymagana w put. "Podstawowa"
"Bezpłatna"
"Premium"
"Standardowa"

TargetUscsiScaleSettings

Nazwa Opis Wartość
maxInstances Maksymalna liczba wystąpień, do których można skalować wdrożenie. Limit przydziału zostanie zarezerwowany dla max_instances. Int
minInstances Minimalna liczba wystąpień, które mają być zawsze obecne. Int
pollingInterval Interwał sondowania w formacie ISO 8691. Obsługuje tylko czas trwania z dokładnością do sekund. struna
scaleType [Wymagane] Typ algorytmu skalowania wdrożenia "TargetUscsi" (wymagane)
targetU enterprisePercentage Docelowe użycie procesora CPU dla narzędzia do skalowania automatycznego. Int

TrackedResourceTags

Nazwa Opis Wartość

UserAssignedIdentities

Nazwa Opis Wartość

UserAssignedIdentity

Nazwa Opis Wartość

Definicja zasobu narzędzia Terraform (dostawcy AzAPI)

Typ zasobu obszary robocze/onlineEndpoints/deployments można wdrożyć przy użyciu operacji docelowych:

  • grupy zasobów

Aby uzyskać listę zmienionych właściwości w każdej wersji interfejsu API, zobacz dziennika zmian.

Format zasobu

Aby utworzyć zasób Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments, dodaj następujący program Terraform do szablonu.

resource "azapi_resource" "symbolicname" {
  type = "Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments@2022-10-01"
  name = "string"
  identity = {
    type = "string"
    userAssignedIdentities = {
      {customized property} = {
      }
    }
  }
  kind = "string"
  location = "string"
  body = jsonencode({
    properties = {
      appInsightsEnabled = bool
      codeConfiguration = {
        codeId = "string"
        scoringScript = "string"
      }
      description = "string"
      egressPublicNetworkAccess = "string"
      environmentId = "string"
      environmentVariables = {
        {customized property} = "string"
      }
      instanceType = "string"
      livenessProbe = {
        failureThreshold = int
        initialDelay = "string"
        period = "string"
        successThreshold = int
        timeout = "string"
      }
      model = "string"
      modelMountPath = "string"
      properties = {
        {customized property} = "string"
      }
      readinessProbe = {
        failureThreshold = int
        initialDelay = "string"
        period = "string"
        successThreshold = int
        timeout = "string"
      }
      requestSettings = {
        maxConcurrentRequestsPerInstance = int
        maxQueueWait = "string"
        requestTimeout = "string"
      }
      scaleSettings = {
        scaleType = "string"
        // For remaining properties, see OnlineScaleSettings objects
      }
      endpointComputeType = "string"
      // For remaining properties, see OnlineDeploymentProperties objects
    }
  })
  sku = {
    capacity = int
    family = "string"
    name = "string"
    size = "string"
    tier = "string"
  }
  tags = {
    {customized property} = "string"
  }
}

Obiekty OnlineScaleSettings

Ustaw właściwość scaleType, aby określić typ obiektu.

W przypadku domyślnejużyj:

{
  scaleType = "Default"
}

W przypadku TargetUscsiużyj:

{
  maxInstances = int
  minInstances = int
  pollingInterval = "string"
  scaleType = "TargetUtilization"
  targetUtilizationPercentage = int
}

Obiekty OnlineDeploymentProperties

Ustaw właściwość endpointComputeType, aby określić typ obiektu.

W przypadku Kubernetes użyj:

{
  containerResourceRequirements = {
    containerResourceLimits = {
      cpu = "string"
      gpu = "string"
      memory = "string"
    }
    containerResourceRequests = {
      cpu = "string"
      gpu = "string"
      memory = "string"
    }
  }
  endpointComputeType = "Kubernetes"
}

W przypadku zarządzanychużyj:

{
  endpointComputeType = "Managed"
}

Wartości właściwości

Konfiguracja kodu

Nazwa Opis Wartość
codeId Identyfikator zasobu usługi ARM zasobu kodu. struna
scoringScript [Wymagane] Skrypt do wykonania podczas uruchamiania. Np. "score.py" struna

Ograniczenia:
Minimalna długość = 1
Wzorzec = [a-zA-Z0-9_] (wymagane)

ContainerResourceRequirements

Nazwa Opis Wartość
containerResourceLimits Informacje o limicie zasobów kontenera: ContainerResourceSettings
containerResourceRequests Informacje o żądaniu zasobu kontenera: ContainerResourceSettings

ContainerResourceSettings

Nazwa Opis Wartość
procesor Liczba żądań/limitu procesorów wirtualnych dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna
Gpu Liczba żądań/limitów kart procesora GPU firmy Nvidia dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna
pamięć Żądanie/limit rozmiaru pamięci dla kontenera. Więcej informacji:
https://kubernetes.io/docs/concepts/configuration/manage-compute-resources-container/
struna

DefaultScaleSettings

Nazwa Opis Wartość
scaleType [Wymagane] Typ algorytmu skalowania wdrożenia "Wartość domyślna" (wymagana)

EndpointDeploymentPropertiesBaseEnvironmentVariables

Nazwa Opis Wartość

EndpointDeploymentPropertiesBaseProperties

Nazwa Opis Wartość

KubernetesOnlineDeployment

Nazwa Opis Wartość
containerResourceRequirements Wymagania dotyczące zasobów dla kontenera (procesor i pamięć). ContainerResourceRequirements
endpointComputeType [Wymagane] Typ obliczeniowy punktu końcowego. "Kubernetes" (wymagane)

ManagedOnlineDeployment

Nazwa Opis Wartość
endpointComputeType [Wymagane] Typ obliczeniowy punktu końcowego. "Zarządzane" (wymagane)

ManagedServiceIdentity

Nazwa Opis Wartość
typ Typ tożsamości usługi zarządzanej (gdzie dozwolone są typy SystemAssigned i UserAssigned). "Brak"
"SystemAssigned"
"SystemAssigned,UserAssigned"
"UserAssigned" (wymagane)
userAssignedIdentities Zestaw tożsamości przypisanych przez użytkownika skojarzonych z zasobem. Klucze słownika userAssignedIdentities będą identyfikatorami zasobów usługi ARM w postaci: "/subscriptions/{subscriptionId}/resourceGroups/{resourceGroupName}/providers/Microsoft.ManagedIdentity/userAssignedIdentities/{identityName}. Wartości słownika mogą być pustymi obiektami ({}) w żądaniach. UserAssignedIdentities

Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments

Nazwa Opis Wartość
tożsamość Tożsamość usługi zarządzanej (tożsamości przypisane przez system i/lub tożsamości przypisane przez użytkownika) ManagedServiceIdentity
rodzaj Metadane używane przez portal/narzędzia/itp. do renderowania różnych środowisk środowiska użytkownika dla zasobów tego samego typu. struna
lokalizacja Lokalizacja geograficzna, w której znajduje się zasób ciąg (wymagany)
nazwa Nazwa zasobu struna

Ograniczenia:
Wzorzec = ^[a-zA-Z0-9][a-zA-Z0-9\-_]{0,254}$ (wymagane)
parent_id Identyfikator zasobu, który jest elementem nadrzędnym dla tego zasobu. Identyfikator zasobu typu: obszarów roboczych/onlineEndpoints
Właściwości [Wymagane] Dodatkowe atrybuty jednostki. OnlineDeploymentProperties (wymagane)
Numer jednostki magazynowej Szczegóły jednostki SKU wymagane dla kontraktu usługi ARM na potrzeby skalowania automatycznego. sku
Tagi Tagi zasobów Słownik nazw tagów i wartości.
typ Typ zasobu "Microsoft.MachineLearningServices/workspaces/onlineEndpoints/deployments@2022-10-01"

Właściwości elementu OnlineDeploymentProperties

Nazwa Opis Wartość
appInsightsEnabled Jeśli wartość true, włącza rejestrowanie usługi Application Insights. Bool
codeConfiguration Konfiguracja kodu dla wdrożenia punktu końcowego. CodeConfiguration
opis Opis wdrożenia punktu końcowego. struna
egressPublicNetworkAccess W przypadku włączenia zezwalaj na dostęp do sieci publicznej ruchu wychodzącego. Jeśli opcja Wyłączone, spowoduje to utworzenie bezpiecznego ruchu wychodzącego. Ustawienie domyślne: włączone. "Wyłączone"
"Włączone"
endpointComputeType Ustaw wartość "Kubernetes" dla typu KubernetesOnlineDeployment. Ustaw wartość "Managed" dla typu ManagedOnlineDeployment. "Kubernetes"
"Zarządzane" (wymagane)
environmentId Identyfikator zasobu usługi ARM lub identyfikator zasobu specyfikacji środowiska dla wdrożenia punktu końcowego. struna
environmentVariables Konfiguracja zmiennych środowiskowych dla wdrożenia. EndpointDeploymentPropertiesBaseEnvironmentVariables
instanceType Typ wystąpienia obliczeniowego. struna
livenessProbe Sonda liveness regularnie monitoruje kondycję kontenera. ProbeSettings
model Ścieżka identyfikatora URI do modelu. struna
modelMountPath Ścieżka do zainstalowania modelu w kontenerze niestandardowym. struna
Właściwości Słownik właściwości. Właściwości można dodawać, ale nie usuwać ani zmieniać. EndpointDeploymentPropertiesBaseProperties
gotowośćProbe Sonda gotowości sprawdza, czy kontener jest gotowy do obsługi ruchu. Właściwości i wartości domyślne są takie same jak sonda aktualności. ProbeSettings
requestSettings Zażądaj ustawień wdrożenia. OnlineRequestSettings
scaleSettings Ustawienia skalowania wdrożenia.
Jeśli ma wartość null lub nie jest podana,
wartość domyślna to TargetUscsiScaleSettings for KubernetesOnlineDeployment
i na Wartość DefaultScaleSettings dla elementu ManagedOnlineDeployment.
OnlineScaleSettings

OnlineRequestSettings

Nazwa Opis Wartość
maxConcurrentRequestsPerInstance Maksymalna liczba współbieżnych żądań na węzeł dozwolonych na wdrożenie. Wartość domyślna to 1. Int
maxQueueWait Maksymalny czas, przez jaki żądanie pozostanie w kolejce w formacie ISO 8601.
Wartość domyślna to 500 ms.
struna
requestTimeout Limit czasu oceniania w formacie ISO 8601.
Wartość domyślna to 5000 ms.
struna

OnlineScaleSettings

Nazwa Opis Wartość
scaleType Ustaw wartość "Default" dla typu DefaultScaleSettings. Dla typu TargetUscsiScaleSettingsustaw wartość "TargetUscsi" na wartość . "Wartość domyślna"
"TargetUscsi" (wymagane)

ProbeSettings

Nazwa Opis Wartość
failureThreshold Liczba niepowodzeń, które mają być dozwolone przed zwróceniem stanu złej kondycji. Int
initialDelay Opóźnienie przed pierwszą sondą w formacie ISO 8601. struna
okres Czas między sondami w formacie ISO 8601. struna
successThreshold Liczba pomyślnych sond przed zwróceniem stanu dobrej kondycji. Int
Limit czasu Limit czasu sondy w formacie ISO 8601. struna

Numer jednostki magazynowej

Nazwa Opis Wartość
pojemność Jeśli jednostka SKU obsługuje skalowanie w poziomie/w, należy uwzględnić liczbę całkowitą pojemności. Jeśli skalowanie w poziomie/w nie jest możliwe dla zasobu, może to zostać pominięte. Int
rodzina Jeśli usługa ma różne generacje sprzętu, dla tej samej jednostki SKU, można je przechwycić tutaj. struna
nazwa Nazwa jednostki SKU. Ex - P3. Zazwyczaj jest to kod z literą i cyfrą ciąg (wymagany)
rozmiar Rozmiar jednostki SKU. Gdy pole nazwy jest kombinacją warstwy i innej wartości, będzie to autonomiczny kod. struna
kondygnacja To pole jest wymagane do zaimplementowania przez dostawcę zasobów, jeśli usługa ma więcej niż jedną warstwę, ale nie jest wymagana w put. "Podstawowa"
"Bezpłatna"
"Premium"
"Standardowa"

TargetUscsiScaleSettings

Nazwa Opis Wartość
maxInstances Maksymalna liczba wystąpień, do których można skalować wdrożenie. Limit przydziału zostanie zarezerwowany dla max_instances. Int
minInstances Minimalna liczba wystąpień, które mają być zawsze obecne. Int
pollingInterval Interwał sondowania w formacie ISO 8691. Obsługuje tylko czas trwania z dokładnością do sekund. struna
scaleType [Wymagane] Typ algorytmu skalowania wdrożenia "TargetUscsi" (wymagane)
targetU enterprisePercentage Docelowe użycie procesora CPU dla narzędzia do skalowania automatycznego. Int

TrackedResourceTags

Nazwa Opis Wartość

UserAssignedIdentities

Nazwa Opis Wartość

UserAssignedIdentity

Nazwa Opis Wartość