目次

Search

  1. はじめに
  2. トランスフォーメーション
  3. ソーストランスフォーメーション
  4. ターゲットトランスフォーメーション
  5. アクセスポリシートランスフォーメーション
  6. アグリゲータトランスフォーメーション
  7. B2B Data Transformation
  8. クレンジングトランスフォーメーション
  9. データマスキングトランスフォーメーション
  10. データサービストランスフォーメーション
  11. 重複排除トランスフォーメーション
  12. 式トランスフォーメーション
  13. フィルタトランスフォーメーション
  14. 階層ビルダートランスフォーメーション
  15. 階層パーサートランスフォーメーション
  16. 階層プロセッサトランスフォーメーション
  17. 入力トランスフォーメーション
  18. Javaトランスフォーメーション
  19. JavaトランスフォーメーションAPIリファレンス
  20. ジョイナトランスフォーメーション
  21. ラベラトランスフォーメーション
  22. ルックアップトランスフォーメーション
  23. 機械学習トランスフォーメーション
  24. マップレットトランスフォーメーション
  25. ノーマライザトランスフォーメーション
  26. 出力トランスフォーメーション
  27. 解析トランスフォーメーション
  28. Pythonトランスフォーメーション
  29. ランクトランスフォーメーション
  30. ルータトランスフォーメーション
  31. ルール仕様トランスフォーメーション
  32. シーケンストランスフォーメーション
  33. ソータートランスフォーメーション
  34. SQLトランスフォーメーション
  35. 構造パーサートランスフォーメーション
  36. トランザクション制御トランスフォーメーション
  37. 共有体トランスフォーメーション
  38. Velocityトランスフォーメーション
  39. ベリファイヤトランスフォーメーション
  40. Webサービストランスフォーメーション

トランスフォーメーション

トランスフォーメーション

Hadoopファイルソースからの入力の処理

Hadoopファイルソースからの入力の処理

Hadoopファイルソースを構造パーサートランスフォーメーションに接続すると、ローカルファイル入力またはHDFS入力を処理できます。例えば、Hadoop環境のストリーミングモードの場合、構造パーサートランスフォーメーションでHadoopファイルソースからの大きなデータ入力を処理できます。
Hortonworks Data PlatformまたはClouderaディストリビューションへのHadoopファイル接続を作成し、構造パーサートランスフォーメーションに入力を提供できます。
Hadoop Files V2コネクタは、1つのファイルまたはディレクトリ全体を処理できます。ディレクトリを処理する場合、コネクタはファイルを再帰的に処理します。
構造パーサートランスフォーメーションでHadoopファイルソースからの出力を処理できるようにするには、構造パーサートランスフォーメーションでフィールドマッピング設定を定義します。
[受信フィールド]
パネルの
[データ]
および
[ファイルパス]
フィールドを
[構造パーサー入力フィールド]
パネルの
[データ]
および
[ファイルパス]
フィールドにマッピングします。フィールドのマッピングは自動または手動で実行できます。