Diagramme de Sankey d'un pipeline de nettoyage de données

Montrez combien d'enregistrements de chaque source passent la validation, sont corrigés automatiquement ou rejetés, et pourquoi. Remplacez les chiffres par ceux de votre import ou ETL.

Un Sankey de nettoyage de données suit les enregistrements de leurs sources, via la validation, jusqu'à l'entrepôt, et ventile les rejetés selon le motif.

10 000 enregistrements arrivent de trois sources. 8 300 passent, 1 000 sont corrigés automatiquement et 700 sont rejetés. Les rejetés sont ensuite triés selon la cause de l'échec.

Le diagramme rend lisible un rapport d'import : pas seulement un taux de rejet, mais quelle source produit les rejets et quelle règle les détecte.

Comment lire ce diagramme

  • 9 300 enregistrements sur 10 000 (93 %) sont chargés : 8 300 propres et 1 000 corrigés.
  • Les formulaires web et l'import de tableur rejettent chacun 10 % de leurs enregistrements, contre 5 % pour le CRM.
  • L'e-mail manquant est le premier motif de rejet, avec 300 sur 700.
  • 1 000 enregistrements ont nécessité une correction automatique, dont il vaut la peine de vérifier ce qu'elle modifie.

Les données derrière le diagramme

Chiffres inventés à titre d'illustration. Ils ne proviennent d'aucune entreprise réelle.

Diagramme de Sankey d'un pipeline de nettoyage de données (enregistrements)
DeVersQuantité (enregistrements)
Export CRMValidation réussie5200
Export CRMCorrigés automatiquement500
Export CRMRejetés300
Formulaires webValidation réussie2300
Formulaires webCorrigés automatiquement400
Formulaires webRejetés300
Import de tableurValidation réussie800
Import de tableurCorrigés automatiquement100
Import de tableurRejetés100
Validation réussieChargés dans l'entrepôt8300
Corrigés automatiquementChargés dans l'entrepôt1000
RejetésE-mail manquant300
RejetésFormat invalide250
RejetésDoublon150

Les mêmes données en CSV

source,target,value
Export CRM,Validation réussie,5200
Export CRM,Corrigés automatiquement,500
Export CRM,Rejetés,300
Formulaires web,Validation réussie,2300
Formulaires web,Corrigés automatiquement,400
Formulaires web,Rejetés,300
Import de tableur,Validation réussie,800
Import de tableur,Corrigés automatiquement,100
Import de tableur,Rejetés,100
Validation réussie,Chargés dans l'entrepôt,8300
Corrigés automatiquement,Chargés dans l'entrepôt,1000
Rejetés,E-mail manquant,300
Rejetés,Format invalide,250
Rejetés,Doublon,150

Comment cela fonctionne

  1. Reprendre les nombres de votre journal de validation

    Enregistrements entrants par source et résultat de chacun.

  2. Regrouper les motifs de rejet

    Utilisez les noms de règles que remonte votre pipeline, plus Autre.

  3. Saisir les flux

    Source vers résultat, résultat vers chargé ou vers un motif.

  4. Vérifier l'équilibre

    Les rejetés doivent égaler la somme de leurs motifs.

Questions fréquentes

Le diagramme peut-il montrer quelles lignes ont été rejetées ?

Non. Un Sankey ne montre que des effectifs. Conservez les lignes rejetées elles-mêmes dans un tableau.

Et si un enregistrement enfreint deux règles ?

Comptez-le une seule fois, sous la première règle enfreinte ou la plus importante, et précisez laquelle sur le diagramme.

Modifier ce Sankey de pipeline

Ouvrez l'exemple comme votre propre diagramme et saisissez vos nombres d'enregistrements.

Modifier ce Sankey de pipeline

Plus dans Diagrammes de Sankey