带你深入探讨数据迁移.docx

带你深入探讨数据迁移
在数据迁移之前,再繁琐的准备都不过分。数据迁移是为了让网站更加适应公司的发展,因此前期的准备调研活动必须要做充分,确保迁移时间内公司业务上面不能收到影响。方案上需要做扎实的准备,本文带大家探讨一下数据迁移的一些东西。
数据收集
在动态数据的收集上通常会存在的一个问题就是数据存在差异且信息混乱。前端业务的不规范操作,会导致原系统中存在业务数据不一致的情况。因为新旧系统之间也存在着规则差异,在数据收集上来后,并不能立即就导入新系统,所以数据迁移的工作还需要进行数据转换。
二、数据转换
数据转换包括数据编码的转换、字段逻辑的转换。新系统通常有自己的一套规则,可能与旧的系统制定同样的逻辑,但也可能完全变了个样。所以在数据转换之前,需要先了解旧系统与新系统之间数据逻辑的区别,以及旧规则与新规则之间的联系。只有找到这个联系点,才能进行准确的转换。
由于转换工作比较麻烦,建议在收集数据前,可以先确定好导入系统的模板字段及字段的定义,便于提前做好准备,比如从旧系统导出的模板可先按导入模板做好整理,减少后期的转换量。
三、系统分析
1、分析原有的业务系统
精确到大致的系统功能模块、大致的处理流程即可
2、分析现有的业务系统
精确到大致的系统功能模块、大致的处理流程即可
3、分析两者自己的区别和差异
大致分析一下两个业务系统之间的区别,有助于确定工作量和工作进度
4、分析用户对旧有数据的需求
分析对旧有数据的需求,才不至于盲目的全部性的进行迁移
5、分析用户对旧有数据的处理规则
五、数据导入
数据转换还只是基于模板和规则的转换,我们并不清楚是否真的转换正确了,是否真的能在新系统中进行应用。所以在导入新系统之前,我们要对数据进行测试环境的模拟导入。
模拟导入会暴露导入数据的问题:格式有误、编码错误、表间数据缺失等情况,这个时候数据就得“回炉重造”了。当数据调整之后再次模拟导入时,系统没再报错也不能掉以轻心。成功导入只是第一步,我们还需要考验导入的数据是否真的能应用。
动态数据的导入,需要验证其准确性和应用性,提前了解数据的应用场景,经过上下游验证的数据才能真正导入正式系统。
总结:在数据迁移过程中还需要根据实际硬件配置、软件环境来进行,有需要的话可以请相关专家进行现场亲临指导。