Developerトランスフォーメーションガイド

前へ次へ

Databricks Sparkエンジンでのソータートランスフォーメーション

Databricks Sparkエンジンの処理ルールには、データ統合サービスの処理ルールと異なるものがあります。

マッピング検証は、大文字小文字の区別が無効な場合に失敗します。

データ統合サービスは、次の場合に、警告をログに記録し、ソータートランスフォーメーションを無視します。

ターゲットとソータートランスフォーメーションのソートキーの間に型の不一致がある。

トランスフォーメーションに、ターゲットに接続されていないソートキーが含まれる。

書き込みトランスフォーメーションが行の順序を維持するように設定されていない。

トランスフォーメーションが書き込みトランスフォーメーションからの直接のアップストリームではない。

データ統合サービスは、NULL値を最高値として扱うようにトランスフォーメーションが設定されている場合でも、NULL値を最低値として扱います。

ソーターキャッシュを、可変長を使用してデータを格納するように最適化することはできません。

データ統合サービスでは、次の制限付きで、並列ソートが有効になります。

マッピング内のソータートランスフォーメーションとターゲットの間に別のトランスフォーメーションが含まれていない。

ソータートランスフォーメーションとターゲットの間で、ソートキーのデータ型が変わらない。

ソータートランスフォーメーションの各ソートキーは、ターゲットのカラムにリンクされている必要がある。

ページをウォッチ

フィードバックを送信