A partir de la versión 10.4.0, puede ejecutar asignaciones de transmisión en el servicio Azure Databricks en los servicios en la nube de Microsoft Azure.
Orígenes y destinos
Puede ejecutar asignaciones de transmisión en los siguientes orígenes y destinos dentro del entorno de Databricks:
Microsoft Azure Event Hubs
Azure Data Lake Storage Gen2 (ADLS Gen2)
Transformaciones
Puede agregar las siguientes transformaciones a una asignación de transmisión de Databricks:
Agregación
Expresión
Filtro
Unión
Normalizador
Rango
Enrutador
Unión
Ventana
Tipos de datos
Se admiten los siguientes tipos de datos:
Matriz
Bigint
Fecha/Hora
Decimal
Doble
Entero
Asignar
Struct
Texto
Cadena
Flujos de trabajo
Puede desarrollar flujos de trabajo de clúster para crear clústeres efímeros en el entorno de Databricks. Utilice Azure Data Lake Storage Gen1 (ADLS Gen1) y Azure Data Lake Storage Gen2 (ADLS Gen2) para crear clústeres efímeros en el entorno de Databricks.
Para obtener más información sobre las asignaciones de transmisión en Azure Databricks, consulte la
Guía del usuario de Data Engineering Streaming 10.4.0