インテリジェント構造を持つデータオブジェクトを使用することで、HDFS内のファイルからすべての注文レコードを読み取るマッピングを作成します。次に、このマッピングを使用してデータを解析し、そのデータをストレージターゲットに書き込みます。

次の図に、マッピングの例を示します。

次のオブジェクトをHDFSマッピング内で使用できます。

HDFS入力

入力オブジェクトRead_transformation_with_intelligent_structure_modelは、HDFS内に保存されたMicrosoft Excelファイルを処理した読み取りトランスフォーメーションであり、フィールド出力を作成します。

Amazon S3出力

出力オブジェクトWrite_transformationは、Amazon S3バケットを表す読み取りトランスフォーメーションです。

マッピングを実行すると、データ統合サービスはバイナリストリーム内のファイルを読み取り、それを読み取りトランスフォーメーションに渡します。読み取りトランスフォーメーションは、インテリジェント構造に従って関連データを抽出し、データを書き込みトランスフォーメーションに渡します。書き込みトランスフォーメーションは、データをストレージターゲットに書き込みます。

Hadoopランタイム環境で実行するためのマッピングを設定できます。

マッピングを設定するには、次のタスクを実行します。

Hadoopクラスタからのファイルを読み取るためのHDFS接続を作成します。
複合ファイルデータオブジェクト読み取り操作を作成します。次のパラメータを指定します。
データオブジェクト内のリソースとしてのインテリジェント構造。インテリジェント構造は、機密データを渡さないように設定されています。
HDFSファイルの場所。
読み取りデータオブジェクト操作内の入力ファイルフォルダの場所。
複合ファイルデータオブジェクト読み取り操作をマッピングにドラッグアンドドロップします。
Amazon S3接続を作成します。
Amazon S3データオブジェクトの書き込みトランスフォーメーションを作成し、そのトランスフォーメーションをマッピングに追加します。