Optimizar los directorios de memoria caché y de destino para particiones
Optimizar los directorios de memoria caché y de destino para particiones
Para obtener un rendimiento óptimo durante la partición de la memoria caché para transformaciones de agregación, combinación, rango y ordenación, configure varios directorios de memoria caché para el Servicio de integración de datos. Para obtener un rendimiento óptimo cuando varios subprocesos escriben en un destino de archivo, configure varios directorios de destino para el Servicio de integración de datos.
Cuando varios subprocesos escriben en un mismo directorio, la asignación podría experimentar un cuello de botella debido a la contención de E/S. Una contención de E/S puede producirse cuando varios subprocesos escriben datos en el sistema de archivos al mismo tiempo.
Al configurar varios directorios, el Servicio de integración de datos determina el directorio de salida para cada subproceso mediante un método Round-Robin. Por ejemplo, puede configurar un objeto de datos de archivo sin formato para que utilice los directorios A y B como directorios de destino. Si el Servicio de integración de datos utiliza cuatro subprocesos para escribir en el destino del archivo, el primer y el tercer subproceso de escritura escribirán los archivos de destino en el directorio A. El segundo y el cuarto subproceso de escritura escribirán los archivos de destino en el directorio B.
Si el Servicio de integración de datos no utiliza particiones de memoria caché para las transformaciones o no utiliza varios subprocesos para escribir en el destino, el servicio escribe los archivos en el primer directorio de la lista.
En la Herramienta del administrador, puede configurar varios directorios de destino y de memoria caché introduciendo varios directorios separados por punto y coma en las propiedades de ejecución del Servicio de integración de datos. Configure los directorios en las siguientes propiedades de ejecución:
Directorio de la memoria caché
Define los directorios de la memoria caché para las transformaciones de agregación, combinación y ordenación. De forma predeterminada, las transformaciones utilizan el parámetro del sistema CacheDir para acceder al valor del directorio de memoria caché definido para el Servicio de integración de datos.
Directorios temporales
Define los directorios de memoria caché para las transformaciones de ordenación. De forma predeterminada, la transformación de ordenación utiliza el parámetro del sistema TempDir para acceder al valor del directorio temporal definido para el Servicio de integración de datos.
Directorio de destino
Define los directorios de destino para los destinos de archivos sin formato. De forma predeterminada, el archivo sin formato utiliza el parámetro del sistema TargetDir para acceder al valor del directorio de destino definido para el Servicio de integración de datos.
En lugar de utilizar los parámetros predeterminados del sistema, los desarrolladores pueden configurar varios directorios específicos para la transformación o el objeto de datos de archivo sin formato en Developer tool.
Una transformación de búsqueda solo puede utilizar un único directorio de la memoria caché.