文本行、数据行和有效活动记录可能不是同一数量。核对样本量时,应考虑表头、空行、重复记录、解析规则和被排除的错误行。
先明确计数单位
统计文本行可以用于初步检查,但不能替代解析后的记录数。表头和说明行通常不是活动记录;复杂字段中的换行也可能影响简单行数。
再核对身份是否唯一
即使有20条数据行,其中也可能出现同一期两次。数量正确只是一个必要线索,不代表覆盖了预期的20个不同活动。
把处理前后数量写出来
报告可以分别列输入、重复、错误、有效及待核查数量。这样别人能理解样本为何改变,而不必从输出总数倒推你的处理方式。
把方法用在一个具体场景
一个文件去掉表头后有20行,其中一行重复、另一行号码缺失。应明确有效记录规模及两项问题,不能继续用20期完整统计的标题掩盖处理结果。
沿着这个问题,可继续阅读抽查几条开奖资料,怎样选择才更有意义?;若需要比较另一项资料,也可参考发现十个问题,怎样区分必须停下与可继续核对?。
| 要区分的事 | 保存或核对方式 |
|---|---|
| 输入 | 解析后的数据行 |
| 去重 | 核对记录身份 |
| 有效量 | 说明排除项 |
常见问题
总数对上了,还需要检查每条身份吗?
需要,不同错误可能相互抵消,让总数看似正确。