1、数据测试的核心方法论是数据一致性
2、可以采用总量比对(数据量)、明细比对、聚合比对(针对关键字段聚合统计)、增量比对(时间戳、数据版本号)、哈希比对、MD5比对等方法
3、业务巡检校验,关注数据血缘(父子表追溯关系)
4、分段比对:数据具有天然的分区属性,比如按用户ID、按时间阶段(年月日)、按用户类型、按数据类型等
5、90%的数据问题,在聚合校验阶段会被发现
1、数据测试的核心方法论是数据一致性
2、可以采用总量比对(数据量)、明细比对、聚合比对(针对关键字段聚合统计)、增量比对(时间戳、数据版本号)、哈希比对、MD5比对等方法
3、业务巡检校验,关注数据血缘(父子表追溯关系)
4、分段比对:数据具有天然的分区属性,比如按用户ID、按时间阶段(年月日)、按用户类型、按数据类型等
5、90%的数据问题,在聚合校验阶段会被发现