Esta seção descreve os novos recursos de big data na versão 9.6.1 HotFix 2.
Informatica Analyst
O Big Data Edition apresenta os seguintes novos recursos e aprimoramentos para a ferramenta Analyst:
Integração da ferramenta Analyst com Hadoop
Na versão 9.6.1 HotFix 2, você pode ativar a ferramenta Analyst para se comunicar com um cluster Hadoop em uma determinada distribuição do Hadoop. É necessário configurar as Opções de Linha de Comando de JVM para o Serviço Analyst.
Para obter mais informações, consulte o
Guia de Serviços de Aplicativo Informatica 9.6.1 HotFix 2
.
Conexões da ferramenta Analyst
Na versão 9.6.1 HotFix 2, você pode usar a ferramenta Analyst para se conectar às origens e aos destinos Hive ou HDFS.
Para obter mais informações, consulte o
Guia do Usuário do Analyst Informatica 9.6.1 HotFix 2
.
Data Warehousing
O Big Data Edition apresenta os seguintes novos recursos e aprimoramentos para data warehousing:
Tipo de Dados Binários
Na versão 9.6.1 HotFix 2, um mapeamento no ambiente Hive pode processar funções de expressão que usem dados binários.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Tipo de Dados de Data e Registro de Data/Hora
Na versão 9.6.1 HotFix 2, o PowerExchange for Hive é compatível com os tipos de dados de Data e Registros de data/hora.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Formato de Arquivo
Na versão 9.6.1 HotFix 2, você pode usar a transformação de Processador de Dados para ler entradas ou saídas do Parquet.
O Apache Parquet é um formato de armazenamento em colunas que pode ser processado em um ambiente Hadoop. O Parquet é implementado para abordar estruturas complexas de dados aninhados e usa um algoritmo de retalhamento e montagem de registro.
Para obter mais informações, consulte o
Guia do Usuário do Data Transformation da Informatica 9.6.1 HotFix 2
.
Linhagem dos Dados
Na versão 9.6.1 HotFix 2, você pode realizar a análise da linhagem de dados em origens e destinos de big data. Você pode criar um recurso do Cloudera Navigator para extrair metadados de origens e destinos de big data e realizar a análise da linhagem de dados nos metadados.
Para obter mais informações, consulte o
Guia do Administrador do Metadata Manager do Informatica 9.6.1 HotFix 2
.
Hadoop Ecosystem
O Big Data Edition apresenta os seguintes novos recursos e aprimoramentos para o Hadoop ecosystem:
Distribuições do Hadoop
Na versão 9.6.1 HotFix 2, o Big Data Edition adicionou a compatibilidade com as seguintes distribuições do Hadoop:
Cloudera CDH 5.2
Hortonworks HDP 2.2
IBM BigInsights 3.0.0.0
Pivotal HD 2.1
O Big Data Edition removeu a compatibilidade com as seguintes distribuições Hadoop:
Cloudera CDH 5.0
Cloudera CDH 5.1
Hortonworks HDP 2.1
Pivotal HD 1.1
Para obter mais informações, consulte o
Guia de Instalação e Configuração do Informatica 9.6.1 HotFix 2 Big Data Edition.
Na versão 9.6.1 HotFix 2, o Big Data Edition é compatível com clusters Cloudera CDH em Amazon EC2.
Autenticação Kerberos
Na versão 9.6.1 HotFix 2, você pode configurar a representação de usuário para o ambiente nativo. Configure a representação de usuário para possibilitar que diferentes usuários executem mapeamentos ou conectem-se a origens e destinos de big data que usam a autenticação Kerberos.
Para obter mais informações, consulte o Guia do Usuário do Informatica
9.6.1 Big Data Edition
.
Otimização de Desempenho
O Big Data Edition tem os seguintes novos recursos para otimização de desempenho:
Compactar os dados em tabelas de preparação temporárias
Na versão 9.6.1 HotFix 2, você pode ativar a compactação de dados em tabelas de preparação temporárias para otimizar o desempenho durante a execução de um mapeamento no ambiente Hive. Quando você ativa a compactação de dados em tabelas de preparação temporárias, o desempenho do mapeamento pode aumentar.
Para ativar a compactação de dados em tabelas de preparação temporárias, configure a conexão Hive para usar o nome de classe de codec que o cluster Hadoop usa. Configure também o cluster Hadoop para ativar a compactação nas tabelas de preparação temporárias.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Classificação paralela
Na versão 9.6.1 HotFix 2, quando você usa uma transformação de Classificador em um mapeamento, o Serviço de Integração de Dados ativa a classificação paralela por padrão quando envia a lógica de mapeamento para o cluster Hadoop.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition
.
Execução de Perfil nas Origens Hadoop no Informatica Analyst
Na versão 9.6.1 HotFix 2, você pode criar e executar um perfil de coluna, um perfil de regra e a descoberta de domínio de dados nas origens Hive e HDFS na ferramenta Analyst.
Para obter mais informações, consulte o
Guia do Usuário do Informatica 9.6.1 HotFix 2 Big Data Edition