Add-AzureHDInsightConfigValues
Agrega una personalización de valores de configuración de Hadoop o una personalización de biblioteca compartida de Hive a una configuración de clúster de HDInsight.
Nota:
Los cmdlets a los que se hace referencia en esta documentación son para administrar recursos de Azure heredados que usan las API de Azure Service Management (ASM). Este módulo heredado de PowerShell no se recomienda al crear nuevos recursos, ya que ASM está programado para la retirada. Para más información, consulte Retirada de Azure Service Manager.
El módulo Az de PowerShell es el módulo de PowerShell recomendado para administrar recursos de Azure Resource Manager (ARM) con PowerShell.
Sintaxis
Add-AzureHDInsightConfigValues
-Config <AzureHDInsightConfig>
[-Core <Hashtable>]
[-Yarn <Hashtable>]
[-Hdfs <Hashtable>]
[-Hive <AzureHDInsightHiveConfiguration>]
[-MapReduce <AzureHDInsightMapReduceConfiguration>]
[-Oozie <AzureHDInsightOozieConfiguration>]
[-Storm <Hashtable>]
[-Spark <Hashtable>]
[-HBase <AzureHDInsightHBaseConfiguration>]
[-Profile <AzureSMProfile>]
[<CommonParameters>] Description
Esta versión de HDInsight de Azure PowerShell está en desuso. Estos cmdlets se quitarán el 1 de enero de 2017. Use la versión más reciente de HDInsight de Azure PowerShell.
Para obtener información sobre cómo usar el nuevo HDInsight para crear un clúster, consulte Creación de clústeres basados en Linux en HDInsight mediante Azure PowerShell. Para obtener información sobre cómo enviar trabajos mediante Azure PowerShell y otros enfoques, consulte Envío de trabajos de Hadoop en HDInsight. Para obtener información de referencia sobre HDInsight de Azure PowerShell, consulte Cmdlets de Azure HDInsight.
El cmdlet Add-AzureHDInsightConfigValues agrega una personalización de valores de configuración de Hadoop, como Core-site.xml o Hive-site.xml, o una personalización de biblioteca compartida de Hive a una configuración de clúster de Azure HDInsight.
El cmdlet agrega valores de configuración personalizados a un objeto de configuración especificado. La configuración personalizada se agrega a los archivos de configuración de los servicios de Hadoop pertinentes cuando se implementa el clúster.
Ejemplos
Ejemplo 1: Configuración de un clúster
PS C:\>$HiveConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightHiveConfiguration'
PS C:\> $HiveConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $HiveConfigValues.AdditionalLibraries = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightDefaultStorageAccount'
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountName = "MyStorageAccount.blob.core.windows.net"
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageAccountKey = (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary
PS C:\> $HiveConfigValues.AdditionalLibraries.StorageContainerName = "MySharedLibContainer"
PS C:\> $OozieConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightOozieConfiguration'
PS C:\> $OozieConfigValues.Configuration = @{ hive.exec.compress.output = true }
PS C:\> $MapredConfigValues = New-Object 'Microsoft.WindowsAzure.Management.HDInsight.Cmdlet.DataObjects.AzureHDInsightMapReduceConfiguration'
PS C:\> $MapredConfigValues.Configuration = @{ mapred.map.max.attempts = 2 }
PS C:\> $MapredConfigValues.CapacitySchedulerConfiguration = @{ mapred.capacity-scheduler.init-poll-interval = 1000 }
PS C:\> $Config = New-AzureHDInsightClusterConfig -ClusterSizeInNodes 4
| Set-AzureHDInsightDefaultStorage -StorageAccountName MyStorageAccount.blob.core.windows.net -StorageAccountKey (Get-AzureStorageKey -StorageAccountName "MyStorageAccount").Primary -StorageContainerName "MyStorageContainer"
| Add-AzureHDInsightConfigValues -Core @{ io.file.buffer.size = 300000 } -MapReduce $MapredConfigValues -Hive $HiveConfigValues -Oozie $OozieConfigValues
PS C:\> $Config | New-AzureHDInsightCluster -Subscription $SubId -Credential $Creds -Name "MyCluster" -Location "North Europe"El primer comando crea un nuevo objeto AzureHDInsightHiveConfiguration y, a continuación, lo almacena en la variable $HiveConfigValues.
Los cinco comandos siguientes crean valores de configuración para Hive y almacenan esos valores como miembros de $HiveConfigValues.
El séptimo comando crea un objeto AzureHDInsightOozieConfiguration y, a continuación, lo almacena en la variable $OozieConfigValues. El octavo comando crea un valor de configuración para Oozie y, a continuación, almacena esos valores como miembro de $OozieConfigValues.
El noveno comando crea un objeto AzureHDInsightMapReduceConfiguration y, a continuación, lo almacena en la variable $MapredConfigValues. Los dos comandos siguientes crean valores de configuración para MapReduce y almacenan esos valores como miembros de $MapredConfigValues.
El duodécimo comando usa el cmdlet New-AzureHDInsightClusterConfig para crear una configuración de clúster de HDInsight y, a continuación, la almacena en la variable $Config. El comando usa el operador de canalización para pasar $Config al cmdlet Set-AzureHDInsightDefaultStorage para actualizar la configuración de almacenamiento predeterminada y al cmdlet Add-AzureHDInsightConfigValues para agregar los nuevos valores de configuración a la configuración del clúster.
El comando final usa el operador de canalización para pasar $Config al cmdlet New-AzureHDInsightCluster para crear un nuevo clúster de HDInsight con la configuración personalizada.
Parámetros
-Config
Especifica el objeto de configuración al que se va a agregar una configuración de Hadoop.
| Tipo: | AzureHDInsightConfig |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | True |
| Aceptar entrada de canalización: | True |
| Aceptar caracteres comodín: | False |
-Core
Especifica un conjunto de valores de configuración de Hadoop para Core-site.xml.
| Tipo: | Hashtable |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-HBase
Especifica un conjunto de valores de configuración de HBase para Hbase-site.xml.
| Tipo: | AzureHDInsightHBaseConfiguration |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Hdfs
Especifica un conjunto de valores de configuración de Hadoop para Hdfs-site.xml.
| Tipo: | Hashtable |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Hive
Especifica un objeto de personalización para el servicio De Hive de Hadoop, incluido un conjunto de valores de configuración de Hadoop para Hive-site.xml y bibliotecas compartidas de Hive.
| Tipo: | AzureHDInsightHiveConfiguration |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-MapReduce
Especifica un objeto de personalización para MapReduce y el programador de capacidad.
| Tipo: | AzureHDInsightMapReduceConfiguration |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Oozie
Especifica un objeto de personalización para el servicio Oozie de Hadoop, incluido un conjunto de valores de configuración de Hadoop para Oozie-site.xml.
| Tipo: | AzureHDInsightOozieConfiguration |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Profile
Especifica el perfil de Azure del que lee este cmdlet. Si no especifica un perfil, este cmdlet lee del perfil predeterminado local.
| Tipo: | AzureSMProfile |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Spark
Especifica un objeto de personalización para Apache Spark.
| Tipo: | Hashtable |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Storm
Especifica un objeto de personalización para Apache Storm.
| Tipo: | Hashtable |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |
-Yarn
Especifica un objeto de personalización para YARN de Hadoop, especificando un conjunto de valores de configuración de YARN personalizados para Yarn-site.xml.
| Tipo: | Hashtable |
| Posición: | Named |
| Valor predeterminado: | None |
| Requerido: | False |
| Aceptar entrada de canalización: | False |
| Aceptar caracteres comodín: | False |