Les outils de la qualité des données
Une donnée est de bonne qualité lorsqu’elle répond aux attentes et aux besoins des consommateurs, la qualité de la donnée dépend donc du contexte d’utilisation et des besoins des utilisateurs. La gestion de la qualité des données est un programme, pas un projet. Les actions doivent s’inscrire dans la durée et selon une stratégie d’amélioration continue. Les actions d’amélioration de la qualité des données doivent être réalisées à travers le cycle de vie de la donnée grâce aux outils ci-dessous :
Le contrôle de la qualité des données grâce aux dimensions/ reporting qualité
Les dimensions de la qualité sont des éléments mesurables de la qualité des données. Ces mesures sont calculées à partir de caractéristiques/questions importantes pour le métier. Par exemple :
La complétude : Le jeu de données/tables/colonnes contient-il des valeurs nulles ou erronées ? Indicateur : Taux de données non nulles.
La cohérence : Peut-on lier les données entre deux sources ? Les données sont-elles cohérentes/ identiques entre deux sources (CRM/facturation) ? Les données sont-elles cohérentes dans un jeu de données ? Indicateur : Taux de données équivalents entre deux sources.
La validité : Les données sont-elles validées et cohérentes (format, domaine de valeur, définition) ? Respectent-elles un comportement « Normal » attendu ? Indicateur : Taux de données conformes à une formule.
La fraîcheur : Les données sont-elles à jour ? Indicateur : Taux de données mises à jour à j+2.
L’unicité : Les enregistrements sont-ils identifiables de manière unique ? Indicateur : Taux de valeurs uniques.
La résolution des problématiques de données
La résolution des problématiques de données consiste à recenser les problèmes de données, effectuer une priorisation des cas à traiter, analyser les causes racines et les impacts avec les experts métiers/SI, proposer, piloter et suivre le plan de remédiation. Les acteurs identifient des opportunités d’amélioration de la qualité des données par l’optimisation des processus et des outils.
Le profiling et l’analyse des données
Le profiling est une forme d’analyse de données utilisée pour inspecter la donnée et ses qualités intrinsèques. Le profiling utilise les techniques statistiques pour découvrir la structure, le contenu et la qualité des données.
Le traitement de la qualité des données
Les actions liées aux traitements de la qualité des données sont : le nettoyage, le formatage, le filtrage, la conversion, la transformation, la consolidation, l’enrichissement…
Découvrez sur le site web ASI notre fiche référence client : Mise en place et pilotage du dispositif de Qualité des Données chez KLESIA.
Philippe, Consultant Big DataPublié le 04/06/2018
Gouvernance de la donnée et réurbanisation du Système d'Information
Comment tirer le meilleur de ses données avec la mise en place d'une gouvernance ? Focus sur 3 piliers fondamentaux.
Attrition : comment limiter le départ de vos clients grâce à la data science ?
Comment prévenir l’attrition, autrement dit le départ de ses clients ?
Le triangle d’or de la sollicitation digitale
Comment exploiter la data pour acquérir et fidéliser des clients ? Philippe vous répond en 3 étapes.
Que prendre en compte pour la construction d’un Data Lake ?
Quelles sont les caractéristiques d'un Data Lake ? Christophe vous explique les fondamentaux pour démarrer votre projet.