ユーザーガイド

前へ次へ

Databricks Sparkエンジンでのルックアップトランスフォーメーション

Databricks Sparkエンジンの処理ルールには、データ統合サービスの処理ルールと異なるものがあります。

マッピング検証は、次の場合に失敗します。

大文字小文字の区別が無効。

ルックアップトランスフォーメーション内のルックアップ条件に、バイナリデータ型が含まれる。

キャッシュが共有、名前付き、動的、キャッシュを使用しないように設定された。キャッシュは静的キャッシュである必要があります。

ルックアップソースはMicrosoft Azure SQL Data Warehouseではありません。

マッピングは、次の場合に失敗します。

トランスフォーメーションが未接続であり、ジョイナトランスフォーメーションと一緒に使用された。

複数一致で最初、最後、または任意の値を返すように選択すると、ルックアップトランスフォーメーションは任意の値を返します。

トランスフォーメーションが複数一致でエラーを報告するように設定した場合、Sparkエンジンは重複した行を削除し、それらの行をログに含めません。

HBaseルックアップで一致が検出されない場合は、すべてのカラムがNULL値である行が生成されます。ルックアップトランスフォーメーションの後にフィルタトランスフォーメーションを追加して、NULL値を除外することができます。

ページをウォッチ

フィードバックを送信