历史记录核验：去重之前先确认时间、期号与来源

领帝28安全专员

整理领帝加拿大28历史记录时，重复数据不一定只是“同一行出现两次”。页面翻页重叠、接口重复返回、不同站点采用不同时区，都可能让同一期记录以不同形式出现。直接按结果数字删除，反而可能误删真实记录。

较稳妥的做法是先保留原始文件，再建立“日期＋期号＋发布时间”的组合键。若来源没有期号，可加入页面地址、抓取时间和原始文本摘要辅助识别。遇到号码相同但时间不同的记录，应先标记为疑似重复，不宜自动合并。表格工具可用条件格式检查重复项，数据量较大时可计算行内容哈希值。

异常检查还要覆盖期号断档、时间倒序、字段为空、格式突然变化等情况。例如连续记录通常相隔固定时间，某一条却提前或延后很多，可能是时区转换、页面缓存或录入错误，并不能仅凭间隔异常断定数据失真。

资料发布时建议附上三项说明：来源类型为公开页面、论坛转录或自行整理；发布时间采用哪个时区；核验状态是已交叉核对、单一来源待复核，还是发现冲突。加拿大28资讯的价值在于可追溯，而不是把未经确认的数据包装成完整档案。原始副本、清洗规则和修改日志都应保留，方便领帝28用户复查。