数据治理全景
概述
数据治理是让数据"可用、可信、可控"的体系工程:数据标准统一口径、数据质量保障准确、数据安全管控风险、数据生命周期控制成本,DCMM 提供成熟度评估框架。本文给出数据治理的全景框架。
一、数据治理是什么
数据治理 = 管理数据资产的体系:
让数据可用(标准)
让数据可信(质量)
让数据可控(安全)
让数据可管(生命周期)| 目标 | 说明 |
|---|---|
| 可用 | 找得到、用得上 |
| 可信 | 准确、一致 |
| 可控 | 安全、合规 |
| 可管 | 成本、效率 |
二、四大支柱
2.1 数据标准
统一口径:
指标定义
命名规范
数据字典
代码标准| 标准 | 说明 |
|---|---|
| 指标标准 | 口径统一 |
| 命名标准 | 表/字段规范 |
| 值域标准 | 枚举统一 |
| 质量标准 | 完整性/准确性 |
2.2 数据质量
质量维度:
完整性、准确性、一致性
及时性、唯一性、有效性| 维度 | 说明 |
|---|---|
| 完整性 | 不缺 |
| 准确性 | 正确 |
| 一致性 | 多源一致 |
| 及时性 | 按时 |
| 唯一性 | 不重 |
2.3 数据安全
分级分类:
敏感数据识别
脱敏/加密
访问控制
审计合规2.4 数据生命周期
采集 → 存储 → 使用 → 归档 → 销毁
各阶段管理三、治理领域
3.1 元数据管理
元数据 = 数据的数据:
技术元数据(表/字段/类型)
业务元数据(含义/口径)
管理元数据(负责人/来源)3.2 数据血缘
数据流转关系:
上游 → 下游
影响分析 / 溯源3.3 数据资产
资产盘点:
目录化、分级化
可检索、可评估四、DCMM 成熟度模型
4.1 概述
DCMM(数据管理能力成熟度评估模型):
国家标准 GB/T 36073
八大能力域| 能力域 | 内容 |
|---|---|
| 数据战略 | 规划/目标 |
| 数据治理 | 组织/制度 |
| 数据架构 | 模型/分布 |
| 数据标准 | 指标/字典 |
| 数据质量 | 规则/监控 |
| 数据安全 | 分级/防护 |
| 数据应用 | 服务/价值 |
| 数据生存周期 | 全流程 |
4.2 成熟度等级
| 等级 | 名称 | 特征 |
|---|---|---|
| 1 级 | 初始级 | 无管理 |
| 2 级 | 受管理级 | 项目级 |
| 3 级 | 稳健级 | 组织级 |
| 4 级 | 量化管理级 | 量化 |
| 5 级 | 优化级 | 持续优化 |
DCMM 价值:
评估现状
指明路径
量化提升五、治理体系设计
5.1 组织与制度
| 要素 | 说明 |
|---|---|
| 组织 | 数据治理委员会 |
| 角色 | 数据 Owner/管家 |
| 制度 | 规范流程 |
| 流程 | 变更/审批 |
5.2 平台支撑
治理平台:
元数据中心
质量平台
安全平台
资产平台| 平台 | 能力 |
|---|---|
| 元数据 | 采集/血缘 |
| 质量 | 规则/监控 |
| 安全 | 分级/脱敏 |
| 资产 | 目录/盘点 |
六、治理实施路径
6.1 实施步骤
1. 盘点现状(元数据)
2. 制定标准(口径/规范)
3. 建设平台(元数据/质量)
4. 落地规则(质量/安全)
5. 运营治理(监控/优化)6.2 优先级
| 阶段 | 重点 |
|---|---|
| 一期 | 元数据 + 标准 |
| 二期 | 质量 + 血缘 |
| 三期 | 安全 + 资产运营 |
实施原则:
先核心数据
先标准后工具
持续运营七、治理成效评估
7.1 指标
| 指标 | 说明 |
|---|---|
| 元数据覆盖率 | 采集比例 |
| 质量合格率 | 规则通过率 |
| 敏感识别率 | 分级覆盖 |
| 查找效率 | 搜索命中 |
| 问题响应 | 处理时效 |
7.2 运营
持续运营:
质量监控看板
问题闭环
标准宣贯
定期评估八、常见挑战
| 挑战 | 应对 |
|---|---|
| 无组织保障 | 治理委员会 |
| 标准落地难 | 平台强约束 |
| 质量责任不清 | 数据 Owner |
| 平台建设贵 | 分阶段 |
| 效果难量化 | 指标体系 |
常见问题速查
| 问题 | 要点 |
|---|---|
| 治理是什么 | 标准/质量/安全/生命周期 |
| 四大支柱 | 四个域 |
| DCMM | 八大域五等级 |
| 怎么落地 | 盘点→标准→平台→运营 |
| 怎么评估 | 指标 + 成熟度 |
| 先做什么 | 元数据 + 标准 |