Ab Version 10.2.2 nutzt Big Data Streaming zum Verarbeiten von Streaming-Daten Spark Structured Streaming.
Spark Structured Streaming ist eine skalierbare und fehlertolerante Open-Source-Stream-Verarbeitungs-Engine auf Basis der Spark-Engine. Sie ermöglicht den Umgang mit spät eintretenden Streaming-Ereignissen und die Verarbeitung von Streaming-Daten basierend auf dem Zeitstempel der Quelle.
Die Spark-Engine führt das Streaming-Mapping kontinuierlich aus. Sie liest die Daten, unterteilt die Daten in Mikro-Batches, verarbeitet die Mikro-Batches, veröffentlicht die Ergebnisse und schreibt dann in ein Ziel.
Weitere Informationen finden Sie im
Informatica Big Data Streaming 10.2.2-Benutzerhandbuch