Data profiling (profilage de données)

Que mesure un data profiling ?

La structure et l'état du fichier, champ par champ : complétude, unicité, conformité de format, cohérence entre colonnes, distribution des valeurs. Il révèle aussi les interrelations entre les données, qui expliquent souvent l'origine d'un défaut mieux que le défaut lui-même.

Quand intervient-il ?

Avant une migration, avant une intégration et avant tout nettoyage. Un profilage fait en amont évite la situation la plus coûteuse d'un projet de qualité de données : découvrir l'ampleur réelle des défauts une fois le chantier engagé et le budget fixé.

Faut-il le refaire ensuite ?

Oui, c'est même sa seconde utilité. Rejoué après traitement, il donne la mesure objective de ce que le nettoyage a produit, et rejoué périodiquement, il montre à quelle vitesse la base se redégrade.