DAMA数据治理学习笔记-数据质量

数据质量

定义

为了确保满足数据消费者的需求，应用数据管理技术进行规划、实施、控制等管理活动

业务驱动因素

提高组织数据价值和数据利用的机会提高低质量数据导致的风险和成本提高组织效率和生产力保护和提高组织的声誉

低质量数据导致风险

无法正确的开具发票增加客服电话量，降低解决问题的能力因措施商业机会造成收入损失影响并购后的整合进展增加受欺诈的风险由错误数据驱动的错误业务决策造成的损失因缺乏良好信誉而导致的业务损失

目标

根据数据消费者的需求，开发一种受管理的方法，使数据适合要求定义数据质量控制的标准和规范，并作为整个数据生命周期的一部分定义和实施测量、监控和报告数据质量水平的过程

原则

重要性全生命周期预防根因修正治理标准驱动客观测量和透明度嵌入业务流程系统强制执行与服务水平关联

活动

定义高质量数据

定义数据质量战略

识别关键数据和业务规则

识别关键数据识别已有规则和模式

执行数据质量初始评估

确定问题并排定优先级执行问题根本原因分析

确定改进方向并排定优先顺序

根据业务影响确定行动的优先级制定预防和纠正措施确认计划的行动

定义数据质量改进目标

开发和部署数据质量操作

开发数据质量操作规程修正数据质量缺陷度量和监控数据质量报告数据质量水平和调查结果

Stong-Wang框架数据质量4个大类

内在数据质量场景数据质量表达数据质量访问数据质量

DAMA UK数据质量的6个核心维度

完备性唯一性及时性准确性有效性一致性

数据质量改进生命周期（PDCA）

计划执行检查处理

常见的业务规则

定义一致性数值存在的记录完备性格式符合性值域匹配性范围一致性映射一致性一致性规则准确性验证唯一性验证及时性验证

数据质量问题的常见原因

缺乏领导力导致的问题数据输入过程引起的问题数据处理功能引起的问题系统设计引起的问题解决问题引起的问题

提升数据质量形式

数据清理或数据清洗数据增强数据解析和格式化数据转换与标准化

工具

数据剖析工具数据查询工具建模和ETL工具数据质量规则模板元数据存储库

方法

预防措施纠正措施质量检查和代码审核模块有效的数据质量指标统计过程控制根本原因分析

实施指南

就绪评估/风险评估组织和文化变革

度量指标

投资回报质量水平数据质量趋势数据问题管理指标数据质量计划示意图

如果觉得《DAMA数据治理学习笔记-数据质量》对你有帮助，请点赞、收藏，并留下你的观点哦！