ユーザーガイド

前へ次へ

Databricksターゲットのルールとガイドライン

ファイルターゲットについては、次の一般的なルールおよびガイドラインを考慮します。

ファイルターゲットは、Microsoft Azure Blob StorageまたはMicrosoft Azure Data Lake Storeに置く必要があります。

行区切り文字は/nにする必要があります。

ファイルを固定長にすることはできません。

複数のカラム区切り文字はサポートされません。

空の値のみがNULL値として扱われます。

NULL処理については、次のルールおよびガイドラインを考慮します。

Null値変換: Databricks Sparkエンジンは、ターゲットに書き込むときに、NULL値を空の文字列（" "）に変換します。例: 12, AB,"",23p09udj。
次のDatabricksターゲットに基づいて、NULL処理動作を考慮します。
ファイルターゲット。Databricks Sparkエンジンは、すべてのNULL値を空の文字列として書き込みます。
Azure SQLデータウェアハウスDatabricks Sparkエンジンは、空の文字列を文字列カラムに書き込むことができますが、空の文字列を文字列以外のカラムに書き込もうとしたときに、マッピングが型不一致で失敗します。
Databricks Sparkエンジンが空の文字列をNULL値に戻してターゲットに書き込めるようにするには、Databricks Spark接続の詳細プロパティinfaspark.flatfile.writer.nullValue=trueを設定します。
NULLに変換される予期しない値: Databricks Sparkエンジンは、フィールドに予期しない値が含まれている場合、次のシナリオに基づいて、同じレコードのすべてのフィールドにNULL値を生成します。
stringデータをnumericカラムに渡すなど、型不一致が発生した。
bigintデータ型、intデータ型などで、データが範囲を超えている。
NULL行をフィルタするには、フィルタトランスフォーメーションの使用を考慮します。

NULLに変換される日付/時刻値: Databricks Sparkエンジンは、日付/時刻値を書き込むときに、Developer toolのランタイム設定の［マッピング］プロパティで設定されている形式を使用します。ターゲットに渡した日付の形式がDeveloper toolに設定されている形式と一致しない場合は、Databricks SparkエンジンはNULL値を書き込みます。Developer toolのデフォルト値はMM/DD/YYYY HH24:MI:SSです。