Oracle数据仓库用户案例.ppt

北京甲骨文软件有限公司
赵 挥
*
Oracle数据中心用户案例介绍
*
1
内容
法国电信
新西兰电信
*
2
法国电信数据仓库
*
3
法国电信(France Telecom)
欧洲第三大电信运按地区建立列表分区
按时间建立范围分区
一天以上的话单数据按天建立365分区
一天以内的话单按小时建立分区
*
13
select sum(sales_amount)
from sales
where sales_date between
to_date(‘01-MAR-1999’,
‘DD-MON-YYYY’)
and to_date(‘31-MAY-1999’,
’DD-MON-YYYY’);
利用分区忽略提高大表的查询性能
分区忽略: 只有相关分区被访问
99-May
99-Apr
99-Feb
99-Jan
99-Mar
99-Jun
Sales
14
系统测试结果
数据访问:
每秒钟23到100个并发查询操作
95% 的查询在1秒钟内完成
*
15
系统中使用的Oracle关键技术－可传输的表空间
业务系统
数据仓库
Mar
Feb
Jan
Mar
Feb
操作系统文件的直接复制
不需要数据的导入/导出
实现按小时的数据加载
*
16
OLTP
Data Warehouse
Data Marts
Archives
Informationdistribution
Staging
可传输表空间在数据仓库中的使用
17
举例利用可传输的表空间和分区技术实现快速数据装载
*
18
详单数据的导出
把需要传输的数据放在单独的表空间
CREATE TABLE temp_jan_sales
NOLOGGING TABLESPACE ts_temp_sales
AS SELECT * FROM sales
WHERE time_id BETWEEN '31-DEC-1999' AND '01-FEB-2000';
导出数据字典
EXP TRANSPORT_TABLESPACE=y
TABLESPACES=ts_temp_sales
FILE=
复制数据文件和数据字典到数据仓库服务器
*
19
详单数据的导入
导入数据字典
IMP TRANSPORT_TABLESPACE=y
DATAFILES='/db/'
TABLESPACES=ts_temp_sales FILE=
通过分区交换，将新数据加入目标表
1. ALTER TABLE sales
ADD PARTITION sales_00jan
VALUES LESS THAN (TO_DATE('01-feb-2000','dd-mon-yyyy'));
2. ALTER TABLE sales
EXCHANGE PARTITION sales_00jan WITH TABLE temp_sales_jan
INCLUDING INDEXES WITH VALIDATION;
*
20
系统测试结果：数据装载
数据装载：装载包含5000万条详单的一个分区和2个索引的一个表空间
文件传输: 4’ 50’’
数据导入到Oracle数据仓库: 瞬时
创建索引：7’50”
预计算及其它运算：14’
合计：32’26”
*
21
物化视图提高汇总数据的访问性能
按通话类型汇总的
每月通话时长
按月汇总的
不同种类通话
时长数据
按地区汇总的
每月通话时长
查询
详细
话单
查询
自动重写
法国和意大利的用户在过去三个月的漫游通话总时长是多少？
*
22
使用Oracle内置的SQL分析函数
汇总 ROLLUP & CUBE
抽样 Sampling
排名 Rank - rank, percentile, ntile, top, bottom
滑动窗口 Moving Window -
avg, sum, min, max, count, variance, stddev, firstvalue
同比 Period-over-period comparisons
时间序列
Lag
报表函数
sum, avg, min, max, variance, stddev, count, ratiotoreport
统计函数
covariance, correlation, linear regression
*
23
Timekey S