最新广发核心系统项目-数据清理方案.doc

广发核心系统工程-数据清理方案
IBS 整合测试工具(IUCI)系统设计说明书
高阳科技控股有限公司〔香港〕 北京高阳金信信息技术有限公司
广发核心系统工程
概清理的数据量。
2、数据清理后一般要对数据库表进行REORG，也可以参照日常系统运行的REORG执行日期，来安排数据清理的运行实施。


【内部资料 请勿外泄】

术语定义
数据清理模块的核心数据结构是数据清理参数表，其包含如下要素。
清理编号
清理编号是8位的字符串，它代表了一类数据清理的规那么，由应用技术人员维护。为了方便记忆，可以定义为数据库表的名称。
清理类型
对同一个清理编号之下清理规那么的再次划分，是20位字符串的自由格式，由应用自己定义和使用。比方对交易历史的清理，在同一清理编号下，不同的模块账号，或者不同的产品可能有不同的清理规那么。
清理时间
表示数据清理的时间要求，即在什么时间点来做数据清理，在IBS CORE中，数据清理时间由清理频率和清理周期组成：
清理频率
清理周期
摘要
日
NN
N=1~99，表示相对于年初每 NN 天就启动数据清理。
例如 NN =01 表示每天都清理，NN =05 表示每5天清理一次。
周
N
N=1~7，表示每周 N 启动数据清理。
例如 N=1 表示周一清理，N=7 表示每周日清理。
旬
NN
NN=01~10，表示每旬的 NN 日启动清理。
例如 NN =01 表示每旬的第1日清理，当 NN=10表示每旬末清理。
月
NN
NN=01~31，表示每个月的 NN 日启动清理。
例如 NN =01 表示每月的1日清理，NN =15 表示每月的15日清理, 特别地当 NN=31表示每月月末清理。
季
NN
NN=01~31，表示每季度的 NN 日启动清理。
例如 NN =01 表示3、6、9、12月的1日清理，NN =15 表示3、6、9、12月的15日清理，特别地当 NN=31表示季末清理。


【内部资料 请勿外泄】

半年
NN
NN=01~31，表示每半年的 NN 日启动清理。
例如 NN =01 表示6、12月的1日清理，NN =15 表示6、12月的15日清理，特别地当 NN=31表示6月30日、12月31日清理。
年
MMDD
MMDD表示指定的月、日，特别地，如果设置为0229那么只会每4年清理一次。
指定
CCYYMMDD
于指定的日期清理。
清理的启动需要按批量的假期表进行计算，当出现假期跨一个清理周期的时候，仍然以当天的批量处理时间为准。例如定义每天清理一次，每次保存5天以内的数据，且假设国庆节7天都为假期不跑批量，那么在9月30日执行清理的时候，只是清理9月26日前的数据，10月8日上班的第一天仍然可以查询到9月26~30日的数据，而不仅仅是10月3~7日的数据。但在10月8日执行数据清理时，会删除10月4日前的所有数据。
如果遇到清理日是假期而没有运行批量时，系统需要在下一个批量日执行数据清理。
保存期限
代表数据保存的时间长短要求，在IBS CORE中，数据保存时间由保存频率和保存周期组成：
保存频率
保存周期
摘要
日
NNN
NN=000~999，表示保存NN天的数据，特别地，当 NN=000时，表示一天都不保存。
月
NN
NN=01~99，表示保存NN个月的数据。
年
NN
NN=01~50，表示保存NN年的数据。
数据保存期限是相对于清理时间而言的，为了不要在月末等特殊日期执行数据清理，清理的时间可能会改在其它日期执行，为防止因此而造成的将一个业务周期的数据拆分成两段的情况，系统提供一个“是否允许按月拆分〞的选项，当该选项为“不允许〞时，表示数据必须按月为周期进行保存。
例如每个月的3日启动数据清理，要求保存一个月的数据，那么在5月3日清理时，如果是“不允许〞按月拆分，系统会保存4月1日~5月3日的数据，如果是“允许〞按月拆分，系统就只保存4月4日~5月3日的数据。


【内部资料 请勿外泄】

系统控制按日保存时，“是否允许按月拆分〞选项是不可选的，且必须为“允许〞。
清理时间和保存期限之间的参数配置可能会出现不作清理的情况，需要在详细设计时考虑。例如选择按日清理，又要保存一个完整月的数据，那