数据治理与大数据平台设计ppt课件.pptx

数据治理与大数据平台设计
数据治理与大数据平台设计
第1页
•
•
•
•
•
•
议程
数据治理背景和现实状况
数据治理策略
元数据管理
主数据管理
数据质量管理
大数据平台设计
数据治理与大数据平台设按照模型设计规范和指南统一设计企业内部数据模型
数据治理与大数据平台设计
第17页
元数据管理系统
可使用
可管理
可控制
模型
要素
关系
定义
规则
应用系统
注
册
元
数
据
库
脚
本
同
步
指
导
数
据
库
设
计
审核、评定、公布
提交
反馈
元
数
据
服
务
标准
规范
标准化体系（数据定义&模型设计）
制订
完善
引用
数据治理与大数据平台设计
第18页
•
•
•
•
•
•
•
元数据管理工具选择
元模型易于扩展
界面友好
安全和系统管理
配置管理
公布、查询、报表功效
平台开放
提前试用
数据治理与大数据平台设计
第19页
•
•
•
•
•
•
议程
数据治理背景和现实状况
数据治理策略
元数据管理
主数据管理
数据质量管理
大数据平台设计
数据治理与大数据平台设计
第20页
什么是主数据
• 企业主数据分散存放在企业各系统内，对
企业至关主要关键业务实体数据，比
如客户、合作搭档、员工等
– 关键
– 分散
– 迟缓
– 共享
数据治理与大数据平台设计
第21页
主数据类型
当事人
事物
地域
财务和组织
数据治理与大数据平台设计
第22页
主数据与参考数据
• 参考数据能够是主数据，但不一定是主数
据
数据治理与大数据平台设计
第23页
为何要作主数据管理
数据冗余
难亍应变
妨碍业务
数据冲突
Why?
数据治理与大数据平台设计
第24页
怎样做好主数据管理
经常碰到问题
数据治理与大数据平台设计
第25页
怎样做好主数据管理
识别并管理主数据相关方
整理并分析主数据生命周期
识别主数据含义、上下文、类型
数据治理与大数据平台设计
第26页
主数据实施流程
运行
维护
项目
实施
主数据
识别
数据
梳理
项目实施关键点
•选择工具
•定制开发
•制订标准规范
•确定组织架构
数据治理与大数据平台设计
第27页
申请
维护
主数据管理系统
注册 准入
审批
访
问
服
务
查
询
安
全
管
理
匹配查重
CRM
数据校验
人事
管
理
流
程
组
织
机
构
统一数据共享
标准规范
强化决议支持
主数据 管理体系
提升数据质量
数
据
导
入
ERP
数
据
分
发
……
版本管理
财务
通知
废弃
数据治理与大数据平台设计
第28页
•
•
•
•
•
•
议程
数据治理背景和现实状况
数据治理策略
元数据管理
主数据管理
数据质量管理
大数据平台设计
数据治理与大数据平台设计
第29页
数据质量问题
数据质量
1、数据值域
3、数据完整性
5、业务规则
7、数据转换
2、数据定义
4、数据有效性
6、结构完整性
8、数据流
数据治理与大数据平台设计
第30页
业务部门
统计部门（业
务部门）负责
业务规则制
定，在业务层
面统管数据质
量和安全。
技术主管部门
技术部门负责数
据集成、使用等
过程中数据质
量，并对数据质
量汇报进行定时
公布。
评审委员会
技术部门设置评
审委员会，对数
据方面变更进
行管控，具备技
术方案否决权。
组织架构设计
● 业务与技术部门各司其职，共同做好数据质量管理工作
数据治理与大数据平台设计
第31页
应用服务
《数据质量管理规范 二级检控
数据质量治理流程
数据录入/质量检验
生产库 后台库
一级检控
复制
数据仓库
ETL
短信通知
短信通知
录入
修改
确认
技术主管部门
》
业务部门管理员
数据治理与大数据平台设计
第32页
策略
Description of
the contents
方法
策略和方法
反面影响和
正面效果
征得了领导
层