Hi, I'm Ask INFA!
What would you like to know?
ASK INFAPreview
Please to access Ask INFA.

目次

Search

  1. はじめに
  2. トランスフォーメーション
  3. ソーストランスフォーメーション
  4. ターゲットトランスフォーメーション
  5. アクセスポリシートランスフォーメーション
  6. アグリゲータトランスフォーメーション
  7. B2Bトランスフォーメーション
  8. チャンキングトランスフォーメーション
  9. クレンジングトランスフォーメーション
  10. データマスキングトランスフォーメーション
  11. データサービストランスフォーメーション
  12. 重複排除トランスフォーメーション
  13. 式トランスフォーメーション
  14. フィルタトランスフォーメーション
  15. 階層ビルダートランスフォーメーション
  16. 階層パーサートランスフォーメーション
  17. 階層プロセッサトランスフォーメーション
  18. 入力トランスフォーメーション
  19. Javaトランスフォーメーション
  20. JavaトランスフォーメーションAPIリファレンス
  21. ジョイナトランスフォーメーション
  22. ラベラトランスフォーメーション
  23. ルックアップトランスフォーメーション
  24. 機械学習トランスフォーメーション
  25. マップレットトランスフォーメーション
  26. ノーマライザトランスフォーメーション
  27. 出力トランスフォーメーション
  28. 解析トランスフォーメーション
  29. Pythonトランスフォーメーション
  30. ランクトランスフォーメーション
  31. ルータトランスフォーメーション
  32. ルール仕様トランスフォーメーション
  33. シーケンストランスフォーメーション
  34. ソータートランスフォーメーション
  35. SQLトランスフォーメーション
  36. 構造パーサートランスフォーメーション
  37. トランザクション制御トランスフォーメーション
  38. 共有体トランスフォーメーション
  39. ベクトル埋め込みトランスフォーメーション
  40. Velocityトランスフォーメーション
  41. ベリファイヤトランスフォーメーション
  42. Webサービストランスフォーメーション

トランスフォーメーション

トランスフォーメーション

集計フィールド

集計フィールド

集計計算を定義するには、集計フィールドを使用します。
アグリゲータトランスフォーメーションを設定するときに、集計フィールドを各計算の出力用に作成して、データフローで使用します。集計フィールドでは集計関数を使用できます。条件句と集計以外の関数も使用できます。
集計フィールドは、
[プロパティ]
パネルの
[集計]
タブで設定します。集計フィールドを設定するときは、フィールド名、データ型、精度、スケール、説明(オプション)を定義します。説明には最大4000文字を含めることができます。実行する計算を定義することもできます。
集計フィールドを設定するときは、トランスフォーメーション内で使用する計算に変数フィールドを使用できます。集計フィールドと変数フィールドにマクロを組み込むこともできます。
詳細モードでは、Group byフィールドが1つの行を返して、集計式にSTDDEV関数とVARIANCE関数が含まれている場合、出力はNULLになります。その原因は、
データ統合
がSpark 3.2を使用するためです。出力値0を取得するには、
マッピング
タスクで
spark.sql.legacy.statisticalAggregate
セッションプロパティをtrueに設定してください。