目次

Search

  1. はじめに
  2. トランスフォーメーションについて
  3. トランスフォーメーションポート
  4. トランスフォーメーションキャッシュ
  5. アドレスバリデータトランスフォーメーション
  6. アグリゲータトランスフォーメーション
  7. 関連付けトランスフォーメーション
  8. 不良レコードの例外トランスフォーメーション
  9. 大文字小文字変換プログラムトランスフォーメーション
  10. 分類子トランスフォーメーション
  11. 比較トランスフォーメーション
  12. 統合トランスフォーメーション
  13. データマスキングトランスフォーメーション
  14. データプロセッサトランスフォーメーション
  15. ディシジョントランスフォーメーション
  16. 重複レコードの例外トランスフォーメーション
  17. 式トランスフォーメーション
  18. フィルタトランスフォーメーション
  19. 階層型からリレーショナルへのトランスフォーメーション
  20. Javaトランスフォーメーション
  21. JavaトランスフォーメーションAPIのリファレンス
  22. Java式
  23. ジョイナトランスフォーメーション
  24. キージェネレータトランスフォーメーション
  25. ラベラトランスフォーメーション
  26. ルックアップトランスフォーメーション
  27. ルックアップキャッシュ
  28. 動的ルックアップキャッシュ
  29. マクロトランスフォーメーション
  30. 一致トランスフォーメーション
  31. フィールド分析での一致トランスフォーメーション
  32. ID分析での一致トランスフォーメーション
  33. ノーマライザトランスフォーメーション
  34. マージトランスフォーメーション
  35. パーサートランスフォーメーション
  36. Pythonトランスフォーメーション
  37. ランクトランスフォーメーション
  38. 読み取りトランスフォーメーション
  39. リレーショナルから階層型へのトランスフォーメーション
  40. REST Webサービスコンシューマトランスフォーメーション
  41. ルータトランスフォーメーション
  42. シーケンスジェネレータトランスフォーメーション
  43. ソータートランスフォーメーション
  44. SQLトランスフォーメーション
  45. 標準化トランスフォーメーション
  46. 共有体トランスフォーメーション
  47. アップデートストラテジトランスフォーメーション
  48. Webサービスコンシューマトランスフォーメーション
  49. WebサービスSOAPメッセージの解析
  50. WebサービスSOAPメッセージの生成
  51. 加重平均トランスフォーメーション
  52. ウィンドウトランスフォーメーション
  53. 書き込みトランスフォーメーション
  54. 付録 A: トランスフォーメーションの区切り文字

Developerトランスフォーメーションガイド

Developerトランスフォーメーションガイド

ソーターキャッシュ

ソーターキャッシュ

データ統合サービスでは、ソータトランスフォーメーションを実行するためにメモリ内にキャッシュが作成されます。データ統合サービスは、ソート操作を行う前に、すべての入力データをソータトランスフォーメーションに渡します。データ統合サービスは、メモリキャッシュで使用可能なスペースよりも多くのスペースを必要とする場合、データをソータトランスフォーメーションの作業ディレクトリに一時的に格納します。
メモリ内のすべてのデータをソートするようにキャッシュサイズを設定していない場合、データ統合サービスによってソースデータに複数のパスが作成されたことを示す警告が、セッションログに表示されます。ソートを完了するためにディスクに情報をページングする必要がある場合、データ統合サービスによってデータに複数のパスが作成されます。データ統合サービスでデータが1回読み込まれ、ディスクにページングしないでメモリでソートが実行される場合に、このメッセージには単一パスに必要なメモリ量が表示されます。マッピングのパフォーマンスを最適化するには、データ統合サービスによってデータに1つのパスが作成されるように、キャッシュサイズを設定します。
入力されるデータの量がソーターキャッシュサイズよりも大きい場合、データ統合サービスはデータを一時的にソータートランスフォーメーションの作業ディレクトリに保存します。データを作業ディレクトリに保存する場合、データ統合サービスは最低でも入力されるデータの量の2倍のディスク領域を必要とします。
最高のパフォーマンスのため、マッピングを実行するマシン上の利用可能な物理メモリの量以下の値になるようにソーターキャッシュサイズを設定します。ソータトランスフォーメーションを使用してデータをソートするには、少なくとも16MB(16,777,216バイト)の物理メモリを割り当てます。デフォルトでは、ソーターキャッシュサイズは[自動]に設定されています。