Table des matières

Search

  1. Préface
  2. Introduction aux transformations
  3. Ports de transformation
  4. Caches de transformation
  5. Transformation Outil de validation des adresses
  6. Transformation Agrégation
  7. Transformation Association
  8. Transformation Exception d'enregistrements incorrects
  9. Transformation Convertisseur de casse
  10. Transformation Classeur
  11. Transformation Comparaison
  12. Transformation Consolidation
  13. Transformation Masquage des données
  14. Transformation Processeur de données
  15. Transformation Décision
  16. Transformation Exception d'enregistrements dupliqués
  17. Transformation Expression
  18. Transformation filtre
  19. Transformation Hiérarchique à relationnel
  20. Transformation Java
  21. Référence de l'API de transformation Java
  22. Expressions Java
  23. Transformation jointure
  24. Transformation Générateur de clés
  25. Transformation Libellé
  26. Transformation Recherche
  27. Caches de recherche
  28. Cache de recherche dynamique
  29. Transformation Macro
  30. Transformation Correspondance
  31. Transformations Correspondance dans l'analyse de champ
  32. Transformations de correspondance dans l'analyse d'identité
  33. Transformation Normaliseur
  34. Transformation Fusion
  35. Transformation Analyseur
  36. Transformation Python
  37. Transformation Rang
  38. Transformation Lecture
  39. Transformation Relationnel à hiérarchique
  40. Transformation Consommateur de service Web REST
  41. Transformation Routeur
  42. Transformation Générateur de séquence
  43. Transformation Trieur
  44. Transformation SQL
  45. Transformation Normalisation
  46. Transformation Union
  47. Transformation Stratégie de mise à jour
  48. Transformation Consommateur de service Web
  49. Analyse des messages SOAP du service Web
  50. Génération des messages SOAP du service Web
  51. Transformation moyenne pondérée
  52. Transformation Fenêtre
  53. Transformation Écriture
  54. Annexe A: Délimiteurs de transformation

Guide de transformation Developer

Guide de transformation Developer

Caches de jointure

Caches de jointure

Lorsque vous exécutez un mappage qui utilise une transformation Jointure, le service d'intégration de données crée un cache d'index et un cache de données en mémoire pour l'exécution de la transformation. Si l'espace disponible dans le cache mémoire est insuffisant, le service d'intégration de données stocke les données de débordement dans des fichiers de cache.
Lorsque vous exécutez un mappage qui utilise une transformation Jointure, le service d'intégration de données lit simultanément les lignes des sources principale et de détail et crée des caches d'index et de données en fonction des lignes principales. Le service d'intégration de données effectue la jointure en fonction des données de la source de détail et des données principales mises en cache.
Le type de transformation Jointure détermine le nombre de lignes que le service stocke dans le cache.
Le tableau suivant décrit les informations que le service d'intégration de données stocke dans les caches pour différents types de transformations Jointure :
Type de transformation Jointure
Cache d'index
Cache de données
Entrée non triée
Stocke toutes les lignes principales dans la condition de jointure avec des clés d'index uniques.
Stocke toutes les lignes principales.
Entrée triée avec des sources différentes
Stocke 100 lignes principales dans la condition de jointure avec des clés d'index uniques.
Stocke les lignes principales qui correspondent aux lignes stockées dans le cache d'index. Si les données principales contiennent plusieurs lignes avec la même clé, le service d'intégration de données stocke plus de 100 lignes dans le cache de données.
Entrée triée avec la même source
Stocke toutes les lignes principales ou de détail dans la condition de jointure avec des clés uniques. Stocke les lignes de détail si le service d'intégration de données traite le pipeline de détail plus rapidement que le pipeline principal. Sinon, stocke les lignes principales. Le nombre de lignes stockées dépend de la vitesse de traitement des pipelines principal et de détail. Si un pipeline traite ses lignes plus rapidement que l'autre, le service d'intégration de données met en cache toutes les lignes qui ont déjà été traitées. Le service conserve les lignes mises en cache jusqu'à ce que l'autre pipeline termine le traitement de ses lignes.
Stocke des données pour les lignes stockées dans le cache d'index. Si le cache d'index stocke des clés pour le pipeline principal, le cache de données stocke les données du pipeline principal. Si le cache d'index stocke des clés pour le pipeline de détail, le cache de données stocke des données pour le pipeline de détail.