运营商大数据治理体系.docx

I
运营商大数据治理体系
目录

规范性引用文件1
术语、定义和缩略语1
总体说明4
概述4
目标4
原则5
数据治理体系5
总体框架5
组织架构6


系I
运营商大数据治理体系
目录

规范性引用文件1
术语、定义和缩略语1
总体说明4
概述4
目标4
原则5
数据治理体系5
总体框架5
组织架构6


系统架构8


系统边界10
与企业级省大数据平台关系11
与对外能力开放平台关系11

数据治理核心模块12
数据标准管理12






2
元数据管理21





数据质量管理28
与传统经营分析系统的区别28




数据资产管理34



本期数据资产功能需求36








数据治理场景45
背景描述45
场景一:银行伪卡交易判别46

3

场景二:银行手机贷业务47


附录49
附录一:数据标准框架49
附录二:数据标准体系定义内容示例49
4
1

本规范规定了企业级省大数据平台数据治理子系统的建设内容,适用于各省(直辖市、自治区)公司企业级省大数据平台数据治理子系统的建设。

下列文件中的条款通过本规范的引用而成为本规范的条款。凡是标注日期的引用文件,其随后所有的修改单(不包括勘误的内容)或修订版均不适用于本规范。然而,鼓励根据本规范达成协议的各方对是否使用这些文件的最新版本进行研究。凡是不标注日期的引用文件其最新版本适用于本规范。
、定义和缩略语
列术语、定义适用于本规范:
字母
名词
解释
C
CWM
CWM标准是OMG组织定义的数据仓库和相关系统的国际兀数据标准,给出了各种元数据结构的标准定义。CWM标准的目的在于:使数据仓库和商业智能软件的元数据在异构的数据分析工具、数据仓库平台、元数据存储库等系统之间进行父互。
E
ETL
特指从数据源系统到大数据平台的数据抽取、转换和加载。
G
管理元数据
描述大数据平台中管理领域相关概念、关系、规则的数据,主要包括人员角色、岗位职责、管理流程等信息。
H
核心元模型
大数据平台核心兀模型是以CWM为基础扩展形成的,针对大数据平台的物理模型、逻辑模型、数据处理过程、接口单元、指标和维度编码等主要实体进行精确定义,并要求各省大数据平台统一遵循的元模型。定义核心元模型的目的是建立大数据平台的统一元数据管理标准,为元数据管理的功能层与应用层解耦、为企业级总部大数据平台和企业级省大数据平台的元数
2
字母
名词
解释
据交换和相互理解提供统一的语义基础。
H
核心元模型参
照表
核心兀模型参照表是对核心兀模型中的枚举类型属性进行枚举值定义的编码表。参照表为枚举类型属性的每个枚举值定义了唯一的编码,并明确该编码的语义,是核心元模型标准化定义的重要组成部分。
J
技术兀数据
描述大数据平台中技术领域相关概念、关系、规则的数据。主要包括对数据结构、数据处理方面的特征描述,覆盖大数据平台数据源接口、数据仓库、ETL、OLAP、数据挖掘、前端展现等全部数据处理环节。
S
数据处理过程
数据从数据源系统到大数据平台前端使用的整个处理过程,包
含大数据平台数据仓库内部的数据抽取、转换和加载。
S
数据采集点
覆盖大数据平台数据处理环节的、获取每个环节运行状态的实体。该实体可以是程序实体也可以是任务实体