ベクトル埋め込みトランスフォーメーションを使用する前に、チャンキングトランスフォーメーションを使用してテキストをチャンクに分割し、テキストを処理して、ベクトル埋め込みのためにデータをよりクリーンで、意味的により一貫性のあるものにします。これにより、ベクトル埋め込みトランスフォーメーションは、Word2VecやBERTなどの埋め込みモデル、または独自の埋め込みモデルを使用して、テキストのそれぞれのチャンクに対してベクトル埋め込みを生成できるようになります。チャンキングトランスフォーメーションの詳細については、「チャンキングトランスフォーメーション」を参照してください。

各ベクトルのIDを作成するには、式トランスフォーメーションでUUID_STRING関数を使用するか、シーケンスジェネレータトランスフォーメーションを使用します。

ターゲットトランスフォーメーションでは、ベクトルをベクトルデータベースに書き込むことができます。