Sumário

Search

  1. Prefácio
  2. Parte   1: Versão 10.5.1
  3. Parte   2: Versões 10.5 - 10.5.0.1
  4. Parte   3: Versões 10.4.1 - 10.4.1.3
  5. Parte   4: Versões 10.4 - 10.4.0.2
  6. Parte   5: Versões 10.2.2 - 10.2.2 HotFix 1
  7. Parte   6: Versão 10.2.1
  8. Parte   7: Versão 10.2 - 10.2 HotFix 2

Novidades e mudanças (10.5.1)

Novidades e mudanças (10.5.1)

Mapeamentos de streaming no AWS Databricks

Mapeamentos de streaming no AWS Databricks

A partir da versão 10.4.1, você pode executar mapeamentos de streaming no serviço AWS Databricks em ecossistemas de nuvem da AWS.
Você pode usar o AWS Databricks para executar mapeamentos com a seguinte funcionalidade:

Origens e Destinos

Você pode executar mapeamentos de streaming em relação às seguintes origens e destinos no ambiente do Databricks:
  • Amazon S3
  • Kinesis Streams
  • Kinesis Firehose

Transformações

Você pode adicionar as seguintes transformações a um mapeamento de streaming do Databricks na AWS:

    Agregador

    Expressão

    Filtro

    Associador

    Normalizador

    Classificação

    Roteador

    União

    Janela

Tipos de dados

O AWS Databricks aceita os mesmos tipos de dados que o Azure Databricks.
Os seguintes tipos de dados são suportados:

    Array

    Bigint

    Data e hora

    Decimal

    Duplo

    Número inteiro

    Mapa

    Estrutura

    Texto

    String

Para obter mais informações, consulte o seguinte
Guia do Usuário do Data Engineering Streaming 10.4.1
.