gouvernance gestion des données données » et gestion des données deux termes qui prêtent le plus souvent à confusion dans le cadre de la stratégie de données d'une entreprise. Ils sont liés, interdépendants et souvent abordés comme s'ils étaient interchangeables. Or, ils ne le sont pas.
gouvernance des données définit les règles : à qui appartiennent les données, comment sont-elles définies, qui peut y accéder, quelles normes de qualité doivent-elles respecter et comment s'assurent-elles de la conformité aux exigences réglementaires ?
gestion des données consiste à effectuer les opérations suivantes : stocker, transférer, intégrer, traiter et maintenir les données afin qu'elles soient accessibles, fiables et exploitables dans l'ensemble de l'organisation.
gouvernance gestion aboutit à des politiques que personne ne peut mettre en œuvre. Une gestion sans gouvernance une infrastructure dépourvue de responsabilité, de définitions cohérentes et de stratégie de conformité.
La différence fondamentale
| Gouvernance des données | gestion des données | |
|---|---|---|
| Ce que c’est | L'ensemble des politiques, des rôles et des normes qui déterminent la propriété, la définition, l'accès et la gouvernance des données | La discipline technique consistant à stocker, transférer, traiter, intégrer et gérer les ressources de données |
| Question principale | Qui est responsable de ces données, que signifient-elles et comment doivent-elles être utilisées ? | Comment stocker, traiter et diffuser ces données de manière fiable et à grande échelle ? |
| Principaux résultats | Politiques, normes, frameworks de responsabilité, glossaire métier, contrôles de conformité | Données stockées, pipelines, processus de contrôle de la qualité des données, intégrations, infrastructure de données accessible |
| Qui s'en charge ? | CDO, gouvernance , propriétaires des données, gestionnaires des données | Ingénieurs de données, administrateurs de bases de données, architectes de plateformes, équipes chargées de l'exploitation des données |
| Outils | Catalogues de données, plateformes métadonnées , moteurs de règles, outils de glossaire métier | Bases de données, entrepôts de données, lacs de données, pipelines ETL/ELT, plateformes d'intégration de données |
| Horizon temporel | Stratégique et continu | Opérationnel au quotidien |
| Relation | Définit les règles que la direction doit respecter | Réalise les tâches techniques conformément aux règles gouvernance |
Qu'est-ce que gouvernance des données ?
gouvernance des données gouvernance la capacité organisationnelle qui définit les responsabilités relatives aux ressources de données et met en place les politiques, les normes et les processus permettant de concrétiser ces responsabilités.
gouvernance des données définit :
- À qui appartient chaque ressource de données?Quelle équipe opérationnelle est responsable de son exactitude, de sa définition et de son utilisation appropriée ?
- Que signifie « données » ? — Les termes et définitions du glossaire métier qui garantissent que toutes les équipes partent d'une même compréhension d'un domaine.
- Qui peut accéder aux données — Les politiques de contrôle d'accès, les processus de validation et les pistes d'audit qui déterminent qui peut utiliser quoi et dans quelles conditions.
- Quelles sont les normes de qualité applicables ? — Les seuils d'exhaustivité, de taux de valeurs nulles, d'actualité et de validation qui rendent un jeu de données suffisamment jeu de données pour être certifié.
- Conformité des données aux réglementations — Les balises de classification, les politiques de conservation et les contrôles de conformité qui répondent aux exigences du RGPD, de la loi HIPAA, de la loi SOX, de la norme BCBS 239 et d’autres réglementations applicables.
- Durée de conservation des données — Les politiques de cycle de vie qui régissent la conservation, l'archivage et la suppression.
gouvernance des données gouvernance avant tout gouvernance une discipline métier et organisationnelle. Elle nécessite un engagement de la direction, une appropriation par les responsables métier et une responsabilité en matière de gestion. La technologie vient la soutenir, mais ne remplace pas la responsabilité humaine qui en est au cœur.
Qu'est-ce que la gestion des données?
gestion des données la discipline technique qui consiste à gérer les données tout au long de leur cycle de vie : depuis leur collecte et leur stockage jusqu'à leur traitement, leur intégration, la gestion de leur qualité et leur mise à disposition des utilisateurs.
gestion des données :
- Architecture des données — Conception des structures, des schémas et des systèmes permettant de stocker et d'organiser les données.
- Intégration des données — Transfert de données entre les systèmes via des pipelines ETL et ELT, des API etplateformes streaming .
- Stockage des données — Gestion des bases de données, des entrepôts de données, des lacs de données et de l'infrastructure de stockage dans le cloud.
- Gestion de la qualité des données — Mise en œuvre des contrôles de qualité, des règles de validation et des processus de correction gouvernance par gouvernance .
- Sécurité des données — Mise en œuvre de solutions de chiffrement, de contrôles d'accès et de protections réseau visant à protéger les données contre tout accès non autorisé et toute violation.
- Gestion du cycle de vie des données — Mise en œuvre des calendriers de conservation, des processus d'archivage et des workflows de suppression requis par gouvernance .
- Master en gestion des données — Gestion d’un enregistrement unique faisant autorité enregistrement les entités clés de l’entreprise : clients, produits, fournisseurs, salariés.
- Opérations sur les données — Surveillance de l'état des pipelines, résolution des défaillances, gestion des capacités et maintien de la fiabilité de l'infrastructure de données.
gestion des données avant tout une discipline technique. Elle est assurée par des ingénieurs de données, des administrateurs de bases de données et des équipes chargées de l'exploitation des plateformes, à l'aide des outils et de l'infrastructure mis en place par l'entreprise.
En quoi ces concepts se recoupent-ils ?
La relation entre gouvernance la gestion ne se caractérise pas par une frontière nette : ces deux disciplines se recoupent à plusieurs égards.
Qualité des données : gouvernance les normes de qualité : quels taux d’exhaustivité, taux de valeurs nulles et exigences de fraîcheur rendent un jeu de données . gestion des données les contrôles de qualité qui évaluent la conformité à ces normes, ainsi que les processus de correction qui remédient aux problèmes lorsqu’ils sont détectés. La qualité relève de gouvernance en matière de définition et de celle de la direction en matière d’exécution.
Lignée des données : gouvernance la documentation de la traçabilité afin de pouvoir suivre les données depuis leur source jusqu'à leur utilisation à des fins d'audit et de conformité. gestion des données le suivi de la traçabilité grâce à l'instrumentation des pipelines, à métadonnées et à l'intégration du catalogue. La traçabilité est une gouvernance et un livrable de gestion.
Contrôle d'accès : gouvernance qui peut accéder à quoi et dans quelles conditions, et exige que chaque décision d'accès soit consignée à des fins d'audit. gestion des données les contrôles d'accès dans les systèmes sous-jacents : autorisations basées sur les rôles dans les bases de données, contrôles basés sur les attributs dans plateformes de données, chiffrement des données en transit et au repos. gouvernance des accès gouvernance la politique ; la gestion des accès relève de la mise en œuvre.
métadonnées :gouvernance que chaque ensemble de données dispose d'informations documentées concernant sa propriété, sa définition, sa traçabilité, son niveau de qualité et sa classification en matière de conformité. gestion des données et met à jour les métadonnées techniques métadonnées schéma, types de données, nombre de lignes, historique d'exécution des pipelines — qui alimentent le gouvernance . métadonnées se situe à la croisée de ces deux disciplines.
Conformité : gouvernance les exigences de conformité : quelles données sont réglementées, quels contrôles s'appliquent, quels enregistrements doivent être conservés. gestion des données ces exigences sur le plan technique : masquage des données à caractère personnel, respect des délais de conservation, enregistrement des journaux d'audit, chiffrement. La conformité relève de gouvernance et de la mise en œuvre par la direction.
Principales différences selon les dimensions
Rôles et responsabilités
| Fonction | gouvernance gestion | Responsabilité principale |
|---|---|---|
| Directeur des données | gouvernance | Parraine gouvernance et définit la stratégie en matière de données |
| Data gouvernance Lead | gouvernance | Gère au quotidien gouvernance |
| Propriétaire des données | gouvernance | Assume la responsabilité opérationnelle d'un domaine de données |
| Responsable des données | gouvernance | Met en œuvre gouvernance au sein d'un domaine |
| Ingénieur de données | Direction | Met en place et assure la maintenance des pipelines de données et de l'infrastructure |
| Administrateur de bases de données | Direction | Gère les performances, le schéma et l'accès à la base de données |
| Architecte de données | Direction (avec gouvernance ) | Conçoit des structures de données et des modèles d'intégration |
| Opérations data | Direction | Surveille l'état du pipeline et résout les problèmes opérationnels |
| Analyste de données | Consommateur des deux | Utilise les données dans le cadre gouvernance relatives à l'infrastructure de gestion |
Outils et plateformes
| Catégorie | gouvernance | Outils de gestion |
|---|---|---|
| Recherche et catalogage | catalogue de données, glossaire métier | agents métadonnées , registres de schémas |
| Qualité | Normes de qualité, politiques de certification | plateformes de qualité des données, frameworks de validation, « Great Expectations » |
| Contrôle d'accès | Moteur de règles, workflow d'accès | RBAC pour bases de données, plateformes IAM, outils de masquage des données |
| Lignée | gouvernance de la lignée, analyse d'impact | Instrumentation des pipelines, agents de capture de lignée |
| Conformité | Contrôles de conformité, rapports d'audit | Chiffrement, masquage, respect des délais de conservation, journalisation des audits |
| Intégration | Contrats de données,gouvernance SLA | Pipelines ETL/ELT, plateformes d'intégration de données, streaming |
| Stockage | Politiques de conservation et de cycle de vie | Bases de données, entrepôts de données, lacs de données, stockage objet |
Modes de défaillance
| Que se passe-t-il en l'absence de gouvernance? | Que se passe-t-il en l'absence de direction ? |
|---|---|
| Définitions incohérentes : un même champ peut avoir des significations différentes selon les systèmes | Les données sont inaccessibles : les systèmes existent, mais les données ne peuvent pas être transférées ou fournies de manière fiable |
| Manque de clarté quant aux responsabilités : les problèmes de qualité restent sans solution car personne n'est tenu pour responsable | La qualité des données se détériore : absence d'infrastructure permettant d'effectuer des contrôles de qualité ou des mesures correctives |
| Risque lié à la conformité : les données soumises à réglementation ne sont ni classifiées ni contrôlées | Échec des contrôles de conformité : les politiques existent, mais ne peuvent pas être mises en œuvre sur le plan technique |
| Mauvaise qualité des données : des normes existent, mais personne ne veille à leur respect | évolutivité : gouvernance ne peuvent pas être appliquées à volume de données important |
| Défaillances de l'IA : les modèles sont construits à partir de données non certifiées et non contrôlées | Les pipelines d'IA tombent en panne : absence d'infrastructure permettant de fournir de manière fiable des données contrôlées aux systèmes d'IA |
gouvernance des données gouvernance gestion des données disciplines connexes
Ces termes sont souvent utilisés de manière interchangeable. Chacun d'entre eux désigne une fonction distincte.
gouvernance des données gouvernance gestion des données: gestion des données la pratique opérationnelle consistant à mettre en œuvre au quotidien gouvernance . gouvernance les règles ; la gestion des données les applique. Les responsables de la gestion des données sont les personnes qui assurent gouvernance dans les domaines qui leur sont attribués. La gestion des données est une composante de gouvernance, et non un synonyme de celle-ci.
gouvernance des données gouvernance métadonnées : métadonnées consiste à recenser et à maintenir le contexte des ressources de données : définitions, traçabilité, scores de qualité, propriété, classifications. C'est la couche opérationnelle qui rend gouvernance et vérifiable. gouvernance métadonnées ne peut être vérifiée ; métadonnées sans gouvernance normes cohérentes. Les deux sont interdépendantes.
gouvernance des données gouvernance qualité des données : La qualité des données est l'un des résultats de gouvernance. Un gouvernance définit des normes de qualité, désigne des responsables chargés de les faire respecter et met en place des outils de gestion pour les contrôler. La qualité sans gouvernance des indicateurs dont personne ne tient compte. gouvernance normes de qualité ne permet pas de certifier que les données sont fiables.
gestion des données . gestion des données de référence : gestion des données référence gestion des données MDM) est une discipline spécifique de gestion des données à maintenir un enregistrement unique et faisant autorité enregistrement les entités métier clés. Il s'agit d'une capacité de gestion sur laquelle reposent gouvernance : la MDM garantit la cohérence et la fiabilité des fiches clients, produits et fournisseurs auxquelles s'appliquent gouvernance .
gestion des données . Data Operations : Les opérations sur les données (DataOps) appliquent les principes du DevOps aux pipelines de données : automatisation, intégration continue, surveillance et itération rapide. Il s'agit d'une méthodologie s'inscrivant dans le cadre de gestion des données que d'une discipline distincte. Les équipes DataOps mettent en œuvre les pipelines et l'infrastructure gestion des données .
Quand gouvernance , quand la direction prend les rênes
Aucune des deux disciplines n'a la priorité en permanence. C'est la situation qui détermine laquelle des deux prévaut.
gouvernance lorsque :
- Définir un nouveau domaine de données et en attribuer la responsabilité avant de mettre en place l'infrastructure.
- Mettre en place des contrôles de conformité avant que les données soumises à réglementation ne soient intégrées dans un nouveau système.
- Résoudre les divergences de définitions entre les différentes unités opérationnelles avant de regrouper les données sur une nouvelle plateforme.
- Définir des normes de qualité avant le déploiement d'une plateforme de surveillance de la qualité des données.
La direction montre l'exemple lorsque :
- Une nouvelle source de données doit être intégrée avant que gouvernance la concernant ne soient entièrement définies ; gouvernance de ces politiques gouvernance une fois que la source est opérationnelle.
- Tout problème de performance ou de fiabilité au sein de l'infrastructure de données nécessite une intervention technique immédiate, quel que soit gouvernance .
- La mise en place d'une nouvelle fonctionnalité d'IA nécessite une infrastructure avant même que le gouvernance de l'IA n'ait été officialisé.
Dans la pratique, les organisations les plus efficaces mènent de front gouvernance la gestion : gouvernance les normes, tandis que la gestion les met en œuvre de manière progressive, sans attendre que gouvernance l'ensemble gouvernance avant de déployer l'infrastructure.
FAQ
gouvernance ce qu'il convient de faire avec les données : à qui elles appartiennent, quelle est leur signification, qui peut les utiliser et quelles normes elles doivent respecter. La direction se charge de la mise en œuvre technique : stockage, transfert, traitement et diffusion des données conformément à ces règles.
En théorie, mais pas dans la pratique à grande échelle. gouvernance qui ne peuvent être mises en œuvre sur le plan technique parce que l'infrastructure de gestion sous-jacente ne support pas support ne sont que des politiques qui n'existent que sur le papier. gouvernance une infrastructure de gestion permettant d'appliquer les contrôles d'accès, d'effectuer des contrôles de qualité, de mettre en œuvre des calendriers de conservation et de tenir à jour des journaux d'audit.
gouvernance des données gouvernance la responsabilité des dirigeants opérationnels : le CDO, les responsables des données dans chaque domaine, les membres gouvernance et les gestionnaires de données. gestion des données des équipes techniques : ingénieurs de données, administrateurs de bases de données, architectes de plateformes et équipes chargées des opérations de données. Dans la pratique, les organisations les plus performantes ont mis en place des structures de collaboration formelles entre ces deux entités, de sorte que gouvernance éclairent les décisions de gestion et que les capacités de gestion encadrent gouvernance .
Un responsablegouvernance des données définit qu’un jeu de données présenter un taux d’exhaustivité supérieur à 95 % pour être certifié. Un ingénieur de données met en place le contrôle qualité qui mesure l’exhaustivité de manière continue et transmet les échecs à un workflow de gouvernance. Le responsable examine les échecs et, soit résout le problème en amont, soit jeu de données du jeu de données . gouvernance la norme ; l’ingénierie a mis en œuvre le contrôle ; gouvernance en fonction du résultat.
La conformité est un résultat que gouvernance en tant que sous-produit des opérations quotidiennes. gouvernance les données réglementées, applique des contrôles d’accès, assure la traçabilité et documente la provenance des données — c’est-à-dire l’ensemble des éléments requis pour les audits de conformité. La direction met en œuvre ces contrôles sur le plan technique. Les organisations qui considèrent la conformité comme une démarche distincte de gouvernance par effectuer deux fois le même travail de documentation.
Les modèles d'IA nécessitent apprentissage propres, traçables et soumises à une gouvernance. gouvernance jeux de données apprentissage , empêche les données soumises à une réglementation d'entrer dans les pipelines d'IA sans avoir été vérifiées, et conserve les historiques de traçabilité qui garantissent la reproductibilité et l'auditabilité des modèles. gestion des données les pipelines qui acheminent apprentissage certifiées vers apprentissage des modèles. Sans cette collaboration entre les deux, les systèmes d'IA reposent sur des données d'entrée non régulées qui ne peuvent être ni auditées ni reproduites.
Frameworks sur ce point. Le DAMA-DMBOK considère gouvernance des données gouvernance l’un des 11 domaines de connaissances relevant de la discipline plus large de gestion des données, faisant ainsi de gouvernance composante de la gestion. Dans la pratique, la plupart des organisations les traitent comme des programmes distincts mais interdépendants, car ils nécessitent des responsables, des équipes et des outils différents, même s’ils partagent des objectifs communs et doivent être coordonnés.