数据迁移整合方案.docx

历史数据的迁徙整合
本次系统是在原有系统的基础上开发达成，所以，新旧系统间就存在着切换 的问题。此外，新开发的系统还存在与其余一些应用系统，比如，公司信誉联网 应用系统、公司登记子网站、外资登记子网站等系统进行整合使之成为一个互相 连通的对应到相应的系统数 据词典中。在比较过程中，需要依照数据照搬原则，数据尽量不要作办理。
在数据词典比较表中需要进行变换的数据字段应当一一对应，对新旧数据表中字段 的名称、种类、精度等都要有详尽的描绘，同时还要明确数据的变换方式。数据变 换方式主要有以下几种：
1） 直接变换。直接变换方式是最常用的方式，就是将原表中对应字段的数据纹 丝没动的搬到新表中来。依照“数据照搬”原则，我们应当应当尽量采纳这 类方法。
2） 程序变换。对那些需要进行计算才能进行变换的数据将采纳程序变换方式进 行。
3） 代码比较。某些代码字段，常常新旧系统的编码不同样，这时就需要参照代 码比较表进行代码比较变换。
4） 种类变换。少量数据可能需要对种类进行变换，如就表以字符串‘YY YY-MM-
DD’来寄存日期，而新表中以DATE型来寄存日期，这时就需要进行种类变换。
5） 常量变换。新表中某些字段可能存在缺省值，这时将采纳常量变换方式，当旧 表没有对应字段或旧表对应字段数据为空时，将直接在新表中写入缺省数据。
6） 不变换。关于旧表有但新表中没有的字段将不作任何变换。
7） 新旧系统代码比较列出了所有需要进行变换的新旧系统数据表中存在的二 级代码间的比较关系，主要以二级代码比较表的形式来反应。

. 数据整理策略
数据整理就是将原系统数据整理为系统变换程序能够识其余数据。数据整理大概分 为两个阶段：第一阶段就是将不同种类根源数据收集备份到一致的数据库中；第二 阶段就是将原始数据进行整理，依照不同的要求分类进入不同的中间数据库，为数 据变换供给中间数据。数据整理过程采纳了以下方法：
保证原始数据的完好性
在进行数据整理之间，我们先需要对原始收集数据进行备份。备份的目的有两个： 一个是一致数据库，便于数据变换，另一个就是为此后数据追根溯源供给参照依 照。在本系统中，我们将采纳DB2作为备份一致数据库。
数据分级过滤策略
数据分级过滤就是把数据依照不同的数据级别进行分类整理进入不同的中间数
据库中。本系统中我们把数据分为三个级别：荒弃数据、待调整数据、可变换数
据。荒弃数据就是该部分数据的存在对系统资源造成浪费的数据， 并且会影响以
后系统的运行。待调整数据就是该部分数据严重影响新系统的运行， 一定进行人 工调整后，方可进行数据变换。可变换数据就是该部分数据不需做任何办理，基本 知够数据变换的要求或许是该部分数据新系统建议调整，但是不影响系统的运行，能 够等新系统运行后再调整，这样能够为数据变换工作节俭好多时间。
借助数据整理有关工具
数据整理特别艰巨，波及的数据量很大，经过人工检查是不行能达成的，所以一 定编写有关的数据整理工具达成数据整理。包含数据整理工具和数据纠错工具。
数据整理工具负责将原始备份数据库中的数据进行分类进入不同的中间数据库； 数据纠错工具负责供给友善、方便的工具界面供用户方有关人员完美和纠正错误 数据。
利用中间库作为桥梁
因为原系统和新系统的数据库构造可能不同样，所以采纳中间库作为连接新旧系统 数据的重要桥梁，关于成立新旧系统的比较关系很重要。一旦业务人员对新系统 中某项变换数据存在疑问的状况下，就能够经过中间库的关系，顺利找出原数据。
数据变换
数据变换就是将整理后的数据，依照比较表的要求进行变换，并写入到新系统。 这个过程能够经过互换系统实现。
数据整理与变换步骤
设计数据移植方案
设计数据移植方案主要包含以下几个方面工作：研究历史数据的构造、根源、数 据项定义、取值等现状，研究新旧数据库构造的差异，评估和选择数据移植的软 硬件平台、选择数据移植方法、选择数据备份和恢复策略、设计数据移植和测试 方案等。
源数据库数据清理
关于一个运行已久的数据库，主要存在三种数据库垃圾：数据库对象垃圾、数据 库权限垃圾、数据垃圾。数据库对象的清理不是一件简单的工作，需有仔细负责的 态度，要有耐力，任何错误的清理不单会造成前端不可以运行，并且将会造成数据 的丢掉。所以清理数据库对象或许需要一个安全、正确，可很快恢复的方法。第一要 认识数据库资源，包含数据库对象，如表、数据库事件、过程、函数，数
据库构造关系，在此基础上联合运行系统，确认数据库垃圾，拟订合理的垃圾清 理方案，达到清理垃圾的目的。
主要方法是对数据库数据进行整合和分解，整合有关数据减少量据的重复，分解 数据则但是数据集体更趋势合理，自然整合和分解要以合适