Índice

Search

  1. Prólogo
  2. Parte 1: Version10.5.3
  3. Parte 2: Version10.5.2 - 10.5.2.1.x
  4. Parte 3: Versión 10.5.1-10.5.1.1
  5. Parte 4: Versiones 10.5-10.5.0.1
  6. Parte 5: Versiones 10.4.1-10.4.1.3
  7. Parte 6: Versiones 10.4-10.4.0.2
  8. Parte 7: Versión 10.2.2 a 10.2.2 HotFix 1
  9. Parte 8: Versión 10.2.1
  10. Parte 9: Versión 10.2 a 10.2 HotFix 2

Novedades y cambios(10.5.3)

Novedades y cambios(10.5.3)

Conexión de Hadoop

Conexión de Hadoop

A partir de la versión 10.2, los siguientes cambios afectan a las propiedades de conexión de Hadoop.
Puede utilizar las siguientes propiedades para configurar la conexión de Hadoop:
Propiedad
Descripción
Configuración de clúster
Nombre de la configuración de clúster asociada al entorno de Hadoop.
Aparece en las propiedades generales.
Escribir archivos de rechazo en Hadoop
Seleccione la propiedad para mover los archivos de rechazo a la ubicación de HDFS que aparece en la propiedad del directorio de archivo de rechazo al ejecutar asignaciones.
Aparece en las propiedades de directorio de rechazo.
Directorio de archivos de rechazo
El directorio para archivos de asignación de Hadoop en HDFS al ejecutar asignaciones.
Aparece en las propiedades de directorio de rechazo.
Dirección del supervisor de trabajos de Blaze
El nombre de host y el número de puerto del supervisor de trabajos de Blaze.
Aparece en la configuración de Blaze.
Nombre de cola de YARN
El nombre de cola del programador de YARN que utiliza el motor de Spark que especifica cuáles son los recursos disponibles en un clúster.
Aparece en la configuración de Blaze.
A partir de la versión 10.2, cambia el nombre de las siguientes propiedades:
Nombre actual
Nombre anterior
Descripción
ImpersonationUserName
HiveUserName
Usuario de suplantación de Hadoop. El nombre de usuario que suplanta el servicio de integración de datos para ejecutar asignaciones en el entorno Hadoop.
Nombre de la base de datos de transferencia provisional de Hive
Nombre de la base de datos
Espacio de nombres para tablas de transferencia provisional de Hive.
Aparece en las propiedades comunes.
Anteriormente aparecía en las propiedades de Hive.
HiveWarehouseDirectory
HiveWarehouseDirectoryOnHDFS
La ruta de acceso absoluta al archivo HDFS de la base de datos predeterminada para el almacén que es local en el clúster.
Directorio de transferencia provisional de Blaze
Directorio de trabajo temporal en HDFS
CadiWorkingDirectory
La ruta de archivo HDFS del directorio que usa el motor Blaze para almacenar archivos temporales.
Aparece en la configuración de Blaze.
Nombre de usuario de Blaze
Nombre de usuario del servicio de Blaze
CadiUserName
El propietario del servicio Blaze y de los registros del servicio Blaze.
Aparece en la configuración de Blaze.
Nombre de cola de YARN
Nombre de cola de YARN
CadiAppYarnQueueName
El nombre de la cola del programador YARN utilizada por el motor de Blaze que especifica los recursos disponibles en un clúster.
Aparece en la configuración de Blaze.
BlazeMaxPort
CadiMaxPort
El valor máximo del intervalo de números de puerto para el motor de Blaze.
BlazeMinPort
CadiMinPort
El valor mínimo del intervalo de números de puerto para el motor de Blaze.
BlazeExecutionParameterList
CadiExecutionParameterList
Una lista opcional de parámetros de configuración para aplicar al motor de Blaze.
SparkYarnQueueName
YarnQueueName
El nombre de cola del programador de YARN que utiliza el motor de Spark que especifica cuáles son los recursos disponibles en un clúster.
Directorio de almacenamiento provisional de Spark
Directorio de almacenamiento provisional de HDFS de Spark
La ruta de acceso del archivo HDFS del directorio que utiliza el motor de Spark para almacenar archivos temporales para ejecutar trabajos.
A partir de la versión 10.2, las siguientes propiedades se eliminan de la conexión y se importan en la configuración del clúster:
Propiedad
Descripción
Dirección de administrador de recursos
El servicio de Hadoop que envía las solicitudes de recursos o inicia las aplicaciones YARN.
Importada en la configuración del clúster como la propiedad
yarn.resourcemanager.address
.
Anteriormente aparecía en las propiedades del clúster de Hadoop.
URI del sistema de archivos predeterminado
El URI para acceder al sistema de archivos distribuido de Hadoop predeterminado.
Importada en la configuración del clúster como la propiedad
fs.defaultFS
o
fs.default.name
.
Anteriormente aparecía en las propiedades del clúster de Hadoop.
A partir de la versión 10.2, las siguientes propiedades están obsoletas y se han eliminado de la conexión:
Propiedad
Descripción
Tipo
El tipo de conexión.
Anteriormente aparecía en las propiedades generales.
Modo de ejecución de metastore*
Determina si la conexión se realiza a un metastore remoto o un metastore local.
Anteriormente aparecía en la configuración de Hive.
URI de la base de datos de metastore*
El URI de la conexión JDBC que se usa para acceder a los datos guardados en una configuración de metastore local.
Anteriormente aparecía en la configuración de Hive.
Controlador de la base de datos de metastore*
Nombre de clase del controlador del almacén de datos de JDBC.
Anteriormente aparecía en la configuración de Hive.
Nombre de usuario de base de datos de metastore*
El nombre de usuario de la base de datos de metastore.
Anteriormente aparecía en la configuración de Hive.
Contraseña de la base de datos de metastore*
La contraseña del nombre de usuario de metastore.
Anteriormente aparecía en la configuración de Hive.
URI de metastore remoto*
El URI de metastore utilizado para acceder a los metadatos en una configuración de metastore remoto.
Esta propiedad se importa en la configuración del clúster como la propiedad
hive.metastore.uris
.
Anteriormente aparecía en la configuración de Hive.
URL de supervisión de trabajo
La URL del servidor de historial de trabajos de MapReduce.
Anteriormente aparecía en la configuración de Hive.
* Estas propiedades están obsoletas en la versión 10.2. Al actualizar a la versión 10.2, los valores de propiedad definidos en una versión anterior se guardan en el repositorio, pero no aparecen en las propiedades de conexión.