接続

前へ次へ

Hadoop接続プロパティ

同期

タスクでHadoopコネクタを使用するには、接続プロパティを設定する必要があります。

Hadoopコネクタは非推奨となり、メンテナンスモードに移行されました。Informaticaは将来のリリースでサポートを廃止する予定です。Hiveコネクタを使用してHadoopクラスタにアクセスすることをお勧めします。

次の表に、Hadoop接続のプロパティを示します。

接続プロパティ	説明
ユーザー名	Hadoopコンポーネントのスキーマのユーザー名。
パスワード	Hadoopコンポーネントのスキーマのパスワード。
JDBC接続URL	Hadoopコンポーネントに接続するためのJDBC URL。「JDBC_URL」を参照してください
ドライバ	Hadoopコンポーネントに接続するためのJDBCドライバクラス。詳細については、「さまざまなHadoopディストリビューションに対するHadoopクラスパスの設定」トピックを参照してください。
コミット間隔	データをHiveにロードするためのバッチサイズ（行数単位）。
Hadoopのインストールパス	Hadoopコンポーネントのインストールパス。 Kerberosクラスタには適用されません。
Hiveのインストールパス	Hiveのインストールパス Kerberosクラスタには適用されません。
HDFSインストールパス	HDFSインストールパス。 Kerberosクラスタには適用されません。
HBaseのインストールパス	HBaseのインストールパス。 Kerberosクラスタには適用されません。
Impalaのインストールパス	Impalaのインストールパス。 Kerberosクラスタには適用されません。
その他のライブラリパス	Hadoopと通信するライブラリ。 Kerberosクラスタには適用されません。
ロギングの有効化	ロギングを有効にすると、ログメッセージが有効になります。［ロギングの有効化］接続パラメータは将来のリリースのプレースホルダであり、このパラメータの状態はコネクタの機能には影響しません。
Hadoopディストリビューション	Kerberos認証を使用できるHadoopディストリビューション。ClouderaとHDP Hadoopディストリビューションに、Kerberos認証を使用できます。
認証タイプ	ネイティブ認証またはKerberos認証を選択できます。
キータブファイル	マシンを認証するための暗号化キーとKerberosプリンシパルが格納されたファイル。
HiveサイトXML	core-site.xml、hive-site.xml、およびhdfs-site.xmlが配置されるディレクトリ。3つのXMLファイルは同じ場所に存在する必要があります。
スーパーユーザーのプリンシパル名	スーパーユーザー特権に割り当てられたユーザーは、管理者特権を持つユーザーが行うことができるすべてのタスクを実行することができます。
偽装ユーザー名	さまざまなユーザーがKerberos認証を使用するHadoopクラスタ内でマッピングを実行したり、Kerberos認証を使用するソースおよびターゲットに接続したりできるようにすることができます。さまざまなユーザーがマッピングを実行したり、ビッグデータのソースおよびターゲットに接続できるようにするには、ユーザーの偽装を設定する必要があります。

インストールパスは、Hadoop jarを配置するパスです。Hadoopコネクタは、Hadoopに命令を送信する前に、インストールパスからライブラリをロードします。Kerberos認証タイプを使用する場合、Hadoopインストールパス、Hiveインストールパス、HDFSインストールパス、HBaseインストールパス、Impalaインストールパス、およびその他のライブラリパスを指定する必要はありません。

Kerberos認証を使用せず、インストールパスを指定しない場合は、Amazon EMR、HortonWorks、MapR、およびClouderaのHadoopクラスパスを設定できます。

非Kerberosクラスタで挿入操作を実行すると、Secure Agentは

hadoop fs -put <FS> <HDFS>

コマンドを使用してファイルをHDFSにアップロードし、

hadoop fs -rm -r <HDFS>

コマンドを使用してHDFSからファイルを削除します。Kerberos認証を有効にした場合、Secure Agentは、Hadoopコマンドを使用せずにHDFSへのデータの書き込みまたはHDFSからのデータの削除を行います。

JDBC URL

JDBCドライバクラス

ガイドをダウンロード

ページをウォッチ

フィードバックを送信

コミュニティ