Inhaltsverzeichnis

Search

  1. Vorwort
  2. Teil 1: Version 10.4.1
  3. Teil 2: Version 10.4.0
  4. Teil 3: Version 10.2.2
  5. Teil 4: Version 10.2.1
  6. Teil 5: Version 10.2
  7. Teil 6: Version 10.1.1
  8. Teil 7: Version 10.1

Versionshandbuch (10.4.1.2)

Versionshandbuch (10.4.1.2)

Spark-Engine

Spark-Engine

Ab Version 10.1.1 weist die Spark-Engine die folgenden neuen Funktionen auf:

Binärdatentypen

Ab Version 10.1.1 unterstützt die Spark-Engine den Binärdatentyp für die folgenden Funktionen:
  • DEC_BASE64
  • ENC_BASE64
  • MD5
  • UUID4
  • UUID_UNPARSE
  • CRC32
  • COMPRESS
  • DECOMPRESS (ignoriert die Gesamtstellenanzahl)
  • AES Encrypt
  • AES Decrypt
Die Spark-Engine unterstützt den Binärdatentyp nicht für die Join- und Lookup-Bedingungen.
Weitere Informationen finden Sie im Kapitel „Funktionsreferenz“ im
Informatica Big Data Management 10.1.1-Benutzerhandbuch
.

Umwandlungsunterstützung für die Spark-Engine

Ab Version 10.1.1 bieten Umwandlungen die folgende zusätzliche Unterstützung auf der Spark-Engine:
  • Die Java-Umwandlung wird mit einigen Einschränkungen unterstützt.
  • Die Lookup-Umwandlung kann auf eine Hive-Lookup-Quelle zugreifen.
Weitere Informationen finden Sie im Kapitel zum Mapping von Objekten in einer Hadoop-Umgebung im
Informatica Big Data Management 10.1.1-Benutzerhandbuch
.

Laufzeitstatistiken für Spark-Engine-Jobausführungen

Ab Version 10.1.1 können Sie Übersichts- und detaillierte Statistiken für Mapping-Jobs auf der Spark-Engine anzeigen.
Sie können die folgenden Spark-Übersichtsstatistiken in der Ansicht
Übersichtsstatistik
anzeigen:
  • Quelle. Der Name der Mapping-Quelldatei.
  • Ziel. Der Name der Zieldatei.
  • Zeilen. Anzahl der für Quelle und Ziel gelesenen Zeilen.
Die Ansicht
Detaillierte Statistiken
zeigt ein Diagramm der Zeilenanzahlen für Spark-Engine-Jobausführungen an.
Weitere Informationen finden Sie im Kapitel zum Mapping von Objekten in einer Hadoop-Umgebung im
Informatica Big Data Management 10.1.1-Benutzerhandbuch
.