Ab Version 10.2.1 beziehen sich die Änderungen in der Spark-Überwachung auf die folgenden Bereiche:
Ereignisänderungen
Aktualisierungen in der Ansicht "Übersichtsstatistik"
Ereignisänderungen
Ab Version 10.2.1 werden nur noch Überwachungsinformationen in den Spark-Ereignissen im Sitzungsprotokoll geprüft.
Zuvor wurden alle Spark-Ereignisse wie in der Spark-Anwendung an den Spark-Exekutor weitergeleitet. Wenn die übermittelten Ereignisse lange Zeit dauerten, traten Leistungsprobleme auf.
Weitere Informationen finden Sie im
Informatica Big Data Management 10.2.1-Benutzerhandbuch
.
Ansicht "Übersichtsstatistik"
Ab Version 10.2.1 können Sie die Statistiken für die Spark-Ausführung basierend auf den Ausführungsstufen einsehen. Beispielsweise zeigen Spark-Ausführungsstufen die Statistik der Ausführungsstufen der Spark-Anwendung an. Stage_0 zeigt die Statistik, die sich auf die Laufphase mit ID=0 in der Spark-Anwendung bezieht. Zeilen und Durchschnittliche Zeilen/Sek. zeigen die Anzahl der aus der Stufe geschriebenen Zeilen und den entsprechenden Durchsatz an. Byte und Durchschnittliche Byte/Sek. zeigen die in der Stufe übertragenen Byte und den Durchsatz an.
Bisher konnten Sie nur die Quell- und Zielzeilen und die Durchschnittszeilen für jede Sekunde, die für die Spark-Ausführung verarbeitet wurde, anzeigen.
Weitere Informationen finden Sie im
Informatica Big Data Management 10.2.1-Benutzerhandbuch