运营商大数据治理体系.docx

运营商大数据治理体系
目录
1. 范围 1
2. 元模型标准化定义的重要组成部分。
J
技术兀数据
描述大数据平台中技术领域相关概念、关系、规则的数据。主要包括对数据 结构、数据处理方面的特征描述，覆盖大数据平台数据源接□、数据仓库、
ETL、OLAP、数据挖掘、前端展现
等全部数据处理环节。
S
数据处理过程
数据从数据源系统到大数据平台前端使用的整个处理过程，包
含大数据平台数据仓库内部的数据抽取、转换和加载。
S
数据采集点
覆盖大数据平台数据处理环节的、获取每个环节运行状态的实体。该实体可 以是程序实体也可以是任务实体
S
数据质量报告
数据质量报告是对数据质量日常监控以及质量评估等过程累积的各种信息进
行汇总、梳理、统计和分析，形成的统计报告
S
数据质量监控
通过获取大数据平台各环节的数据质量监控信息，结合兀数据库中的有关检 杳规则，对各个环节的数据质量情况进行判断，并及时向数据质量监控人员 报告。
S
数据质量规则
库
数据质量规则库是对数据质量管理活动所用到的各种判断及校验规则进行归 类和存放的存储结构， 存储的内容包括采集规则、
监控规则、告警规则和审计规则等
S
数据质量信息
库
数据质量管理子系统存储层上的存储结构，用于存储数据质量
信息采集程序采集的数据质量信息、质量评估信息、冋题解决
方案和问题处理流程信息等
S
省公司
通信集团各省（直辖市、自治区）移动通信有限公司。
S
SQL脚本
自动解析
SQL脚本自动解析指通过对SQL脚本的词法、语法和语义进行分析，自 动生成满足CWM规范要求的数据处理过程的技术兀
字母
名词
解释
数据的功能。
Y
业务元数据
描述大数据平台中业务领域相关概念、关系、规则的数据。主
要包括业务术语、信息分类、指标定义(指标□径) 、业务规则
等信息。
Y
元模型
兀模型是描述兀数据的基础模型结构，用于说明兀数据对象的各种属性、结 构和关系。
Y
元数据
兀数据是描述数据间关系的数据。大数据平台中兀数据泛指描述数据概念
(Concepts)、数据间关系(Roles)、数据处理规则
(Rules)的数据，其中，领域语义( Semantics)和知识
(Knowledge )也属于兀数据的范畴。
D
数据标准
指在台企业级省大数据平台下为了使企业内外部使用和交换的数据是一致和 准确的，经协商一致制定并由大数据治理委员会主管机构批准，具有行业特 点且共同使用和重复使用的一种规范性约束。
D
数据标准体系
指数据标准按照企业级省大数据平台需求对数据进行标准化的划分归类。
D
数据标准内容
按照数据标准体系划分的要求分别给出各数据标准制定的规范内容。
D
行业参考模型
实体
规范中原定义或新增加的逻辑数据模型 LDM实体。
D
公共代码标准
需要引用外部公共标准机构的标准。如：世界各国和地区名称代码等。
F 列略缩语适用于本规范:
缩写
英文描述
中文描述
AST
Abstract Syntax Tree
抽象语法树
BOSS
Busin ess Operati on Support System
业务运营支撑系统
缩写
英文描述
中文描述
CWM
Common Warehouse Metamodel
公共仓库兀模型
ETL
Extractio n Tran sformatio n Loadi ng
抽取、转换和加载
OLAP
On-li ne An alysis Process
在线分析处理
XMI
XML Metadata In tercha nge
XML元数据交换
BI
Busin ess In tellige nee
商务智能
REST
Represe ntati onal State Tran sfer
表述性状态转移
总体说明
. 概述
本规范用于指导企业级省大数据平台数据治理子系统建设， 规定了省大数据平台数据治
理的范围和要求，明确了数据治理子系统的体系结构， 制定了数据治理子系统的功能和处理 流程。数据治理子系统包含数据标准管理、元数据管理、数据质量管理、数据资产管理、数 据安全管理等功能模 块。本方案借鉴资产管理的方法理论来管理数据， 将数据作为一种特殊 的资产，对进入平台的数据进行标准化的规范约束， 并以元数据作为驱动，连接数据的标准 管理