A partir de la versión 10.2.1, la información de supervisión de los eventos de Spark solo se comprueba en el registro de sesión.

Antes, los eventos de Spark se retransmitían tal cual de la aplicación Spark al ejecutor de Spark. Cuando los eventos retransmitidos tardaban demasiado, se producían problemas de rendimiento.

Para obtener más información, consulte la

Guía del usuario de Informatica Big Data Management 10.2.1

.

A partir de la versión 10.2.1, puede ver las estadísticas de la ejecución de Spark según las etapas de ejecución. Por ejemplo, las etapas de ejecución de Spark muestran las estadísticas de las etapas de ejecución de la aplicación Spark. Stage_0 muestra las estadísticas relacionadas con la etapa de ejecución con el ID=0 en la aplicación Spark. Los campos Filas y Promedio de filas/seg muestran el número de filas escritas fuera de la etapa y el rendimiento correspondiente. Los campos Bytes y Promedio de bytes/seg muestran los bytes y el rendimiento emitidos en la etapa.

Antes, solo se podían ver las filas de origen y destino y las filas promedio por cada segundo procesado en la ejecución de Spark.

Para obtener más información, consulte la

Guía del usuario de Informatica Big Data Management 10.2.1

.