青大海威数据仓库全面解决方案.doc

青大海威数据仓库全面解决方案
开发背景
随着国内信息化建设的日益提高。各类客户的业务系统所积累的业务数据日趋膨大。企业的领导者随着市场竞争的加剧,非常希望能从纷繁的业务数据中提取综合反映企业、单位综合经营状况的信息,从而帮助决策。但企业业务系统的不规范,数据的不统一,历史数据的过于巨大以及反映信息的界面不够友好,都阻碍了决策支持系统的建设。
数据仓库技术的日趋成熟,正好可以有效的解决上面的问题。但现在多数厂商提供的数据仓库解决方案已高昂的价格把大多都用户拒之门外,而且也给采购他们系统的客户带来更大的风险。微软MSSQLSERVER是全球性价比最好的数据仓库解决方案,同时也是全球布置最多的数据仓库解决方案。
基于以上原因,青大海威公司基于微软SQLSERVER所提供的数据仓库框架结构,开发了更适合国内客户应用习惯的前端多维分析报表工具:HDCiAnlyzer和HDCiReport。2001年海威公司在MSSQL2000提供数据挖掘规范的基础上又开发了通用的数据挖掘平台软件:HDCMINing。该系统不仅集成了微软提供的两种算法,而且可以根据客户的实际情况选择其他算法插件。
海威公司研发的全面的数据仓库解决方案,是一套统用的决策支持解决方案,可广泛的应用于政府、企业、交通、电信、金融等领域。
方案详细介绍:
青大海威公司的业务智能解决方案面向政府、制造、通信、金融等个行业提供解决方案。
整个系统由三部分组成:第一部分是由用户数据源到业务智能中央数据库的ETL过程;第二部分是根据用户业务模型建立业务智能分析模型;第三部分是面向终端用户进行数据的发布和多维分析工作。
整个业务智能解决方案除前端数据发布和多维分析工具采用青大海威公司自己开发的HDC3数据展示套件外,其他各部分均基于微软平台构建。主要使用的微软产品有:WINDOWS2000ADVANCEDSERVER,SQLSERVER2000,IIS等。如下页图所示:
方案中,数据的ETL过程采用微软的DTS通过标准接口OLEDB或ODBC(针对不支持OLEDB的数据源,如:Sybase)定义ETL过程的数据源连接,通过DTS自带的抽取规则或使用T-SQL脚本语言定义数据抽取、清洗和转换方法,使用DTS提供的PACKAGE及工作流功能定义各PACKAGE的执行顺序,使用SQLSERVER中设置的定时任务对由DTS定义的任务包进行统一的管理和调度。
业务智能系统中央数据库选用SQLSERVER2000,其具体产品的选择将视用户的现有数据量及数据增量情况确定,一般推荐用户使用SQLSERVERENTERPRISEEDITION(25USERS)。在中央数据库的实施过程中需要考虑数据量与效率、系统安全性与数据安全性、备份与还原策略等问题。这些问题的解决需要考虑使用SQLSERVER2000的分布式处理,WINDOWS2000的集群策略以及SQLSERVER2000的数据同步、数据定时备份和还原设置。
业务智能解决方案的核心部分是分析模型的构建和管理,这部份我们采用的是SQLSERVER2000自带的OLAP服务器并使用AnalysisManager完成整个模型的构建,指标的设置、维度的设计、计算指标的定义(应用MDX)、模型分区设计、通过ADOMD和DSO进行模型操作应用设计,设置多维数据集