Guía de versiones (10.4.1.1)

Anterior Siguiente

Compatibilidad con Amazon Glue Metastore

A partir de la versión 10.4.1.1, puede acceder a Amazon Glue como metastore de Hive con un clúster de Amazon EMR 5.29.

Amazon Glue es el servicio de ETL de Amazon.El clúster de Amazon EMR 5.29 puede usar Glue como metastore de Hive.

Amazon Glue solo se admite cuando el clúster de EMR no está habilitado para Kerberos.

Para habilitar la integración con un clúster de EMR con Glue, lleve a cabo las tareas de esta sección.

Habilite la compatibilidad con Glue como metastore de Hive copiando los archivos .jar del clúster de Amazon EMR al dominio de Informatica:

Copie el archivo hive-exec-1.2.1-spark2-amzn-1.jar file del directorio

/usr/lib/spark/jars/

del clúster de EMR 5.29 habilitado para Glue y péguelo en la siguiente ubicación:

<Informatica home>/services/shared/spark/lib_spark_2.4.3_hadoop_2.7.0

Sobrescriba el archivo hive-exec-1.2.1-spark2-amzn-1.jar existente en el directorio.

Copie el archivo aws-glue-datacatalog-spark-client-1.11.0.jar del directorio

/usr/share/aws/hmclient/lib

del clúster de EMR 5.29 habilitado para Glue y péguelo en la siguiente ubicación:

<Informatica home>/services/shared/spark/lib_spark_2.4.3_hadoop_2.7.0

Cuando la propiedad hive-metastore-uris no se encuentre en hive-site.xml, establezca la siguiente propiedad en hive-site.xml en el clúster:

hive-metastore-uris=thrift://<Hive host name>:<port>

Para ver las limitaciones conocidas relacionadas con la compatibilidad con Glue, consulte las

Notas de la versión de Informatica 10.4.1.1.

Para obtener más información acerca de Amazon Glue, consulte https://aws.amazon.com/glue/. Para obtener información sobre la compatibilidad de Informatica con Amazon Glue, consulte la Tabla de disponibilidad de productos en https://network.informatica.com/community/informatica-network/product-availability-matrices.

Enviar comentarios