Sumário

Search

  1. Versão 10.1
  2. Versão 10.0
  3. Versão 9.6.1
  4. Versão 9.6.0

Big Data

Big Data

Esta seção descreve os novos recursos de big data na versão 9.6.1 HotFix 2.

Informatica Analyst

O Big Data Edition apresenta os seguintes novos recursos e aprimoramentos para a ferramenta Analyst:
Integração da ferramenta Analyst com Hadoop
Na versão 9.6.1 HotFix 2, você pode ativar a ferramenta Analyst para se comunicar com um cluster Hadoop em uma determinada distribuição do Hadoop. É necessário configurar as Opções de Linha de Comando de JVM para o Serviço Analyst.
Para obter mais informações, consulte o
Guia de Serviços de Aplicativo Informatica 9.6.1 HotFix 2
.
Conexões da ferramenta Analyst
Na versão 9.6.1 HotFix 2, você pode usar a ferramenta Analyst para se conectar às origens e aos destinos Hive ou HDFS.
Para obter mais informações, consulte o
Guia do Usuário do Analyst Informatica 9.6.1 HotFix 2
.

Data Warehousing

O Big Data Edition apresenta os seguintes novos recursos e aprimoramentos para data warehousing:
Tipo de Dados Binários
Na versão 9.6.1 HotFix 2, um mapeamento no ambiente Hive pode processar funções de expressão que usem dados binários.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Tipo de Dados de Data e Registro de Data/Hora
Na versão 9.6.1 HotFix 2, o PowerExchange for Hive é compatível com os tipos de dados de Data e Registros de data/hora.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Formato de Arquivo
Na versão 9.6.1 HotFix 2, você pode usar a transformação de Processador de Dados para ler entradas ou saídas do Parquet.
O Apache Parquet é um formato de armazenamento em colunas que pode ser processado em um ambiente Hadoop. O Parquet é implementado para abordar estruturas complexas de dados aninhados e usa um algoritmo de retalhamento e montagem de registro.
Para obter mais informações, consulte o
Guia do Usuário do Data Transformation da Informatica 9.6.1 HotFix 2
.

Linhagem dos Dados

Na versão 9.6.1 HotFix 2, você pode realizar a análise da linhagem de dados em origens e destinos de big data. Você pode criar um recurso do Cloudera Navigator para extrair metadados de origens e destinos de big data e realizar a análise da linhagem de dados nos metadados.
Para obter mais informações, consulte o
Guia do Administrador do Metadata Manager do Informatica 9.6.1 HotFix 2
.

Hadoop Ecosystem

O Big Data Edition apresenta os seguintes novos recursos e aprimoramentos para o Hadoop ecosystem:
Distribuições do Hadoop
Na versão 9.6.1 HotFix 2, o Big Data Edition adicionou a compatibilidade com as seguintes distribuições do Hadoop:
  • Cloudera CDH 5.2
  • Hortonworks HDP 2.2
  • IBM BigInsights 3.0.0.0
  • Pivotal HD 2.1
O Big Data Edition removeu a compatibilidade com as seguintes distribuições Hadoop:
  • Cloudera CDH 5.0
  • Cloudera CDH 5.1
  • Hortonworks HDP 2.1
  • Pivotal HD 1.1
Para obter mais informações, consulte o
Guia de Instalação e Configuração do Informatica 9.6.1 HotFix 2 Big Data Edition.
Na versão 9.6.1 HotFix 2, o Big Data Edition é compatível com clusters Cloudera CDH em Amazon EC2.
Autenticação Kerberos
Na versão 9.6.1 HotFix 2, você pode configurar a representação de usuário para o ambiente nativo. Configure a representação de usuário para possibilitar que diferentes usuários executem mapeamentos ou conectem-se a origens e destinos de big data que usam a autenticação Kerberos.
Para obter mais informações, consulte o Guia do Usuário do Informatica
9.6.1 Big Data Edition
.

Otimização de Desempenho

O Big Data Edition tem os seguintes novos recursos para otimização de desempenho:
Compactar os dados em tabelas de preparação temporárias
Na versão 9.6.1 HotFix 2, você pode ativar a compactação de dados em tabelas de preparação temporárias para otimizar o desempenho durante a execução de um mapeamento no ambiente Hive. Quando você ativa a compactação de dados em tabelas de preparação temporárias, o desempenho do mapeamento pode aumentar.
Para ativar a compactação de dados em tabelas de preparação temporárias, configure a conexão Hive para usar o nome de classe de codec que o cluster Hadoop usa. Configure também o cluster Hadoop para ativar a compactação nas tabelas de preparação temporárias.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Classificação paralela
Na versão 9.6.1 HotFix 2, quando você usa uma transformação de Classificador em um mapeamento, o Serviço de Integração de Dados ativa a classificação paralela por padrão quando envia a lógica de mapeamento para o cluster Hadoop.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.

Execução de Perfil nas Origens Hadoop no Informatica Analyst

Na versão 9.6.1 HotFix 2, você pode criar e executar um perfil de coluna, um perfil de regra e a descoberta de domínio de dados nas origens Hive e HDFS na ferramenta Analyst.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.