去重不是找出两个看起来相似的标题然后删除一个,而是确认它们代表的记录关系。
阅读边界 本文讨论资料方法,不陈述或推断枫可怜的个人履历、奖项、账号或未经证实的作品事实。
先比较稳定字段
优先比较来源域名、页面标识、机构编号和明确的版本信息,再看标题与日期。标题容易被翻译、缩写和重新排版,不能独自决定合并。
若两个条目只共享枫可怜关键词,而没有共享作品级标识,它们仍可能完全不同。关键词是检索入口,不是作品唯一键。
差异也可能有信息
封面、时长、语言、发布日期或页面说明出现差异时,应先把差异写入对照表。差异可能来自地区展示、页面更新或第三方编辑,也可能说明条目确实不同。
任何合并都要保存被合并条目的旧链接和本地编号,使后来编辑能够撤销决定。没有撤销路径的去重会把资料损失伪装成清理。
给决定设置证据等级
可以使用“确定重复”“高度可能”“信息不足”“确定不同”四级。只有第一类适合自动合并,第二类仍需人工复核,第三类保持并列。
检查表最后一项是版权与隐私边界:不要下载未知文件来比对,不收集私人账号信息,也不把去重结果包装成对人物身份的确认。
四步操作清单
- 比较稳定页面标识
- 逐项记录差异字段
- 选择可撤销的判断等级
- 保留被合并记录的来源轨迹
相关问题
相同封面能直接去重吗?
不能,封面可能被复用或转载。
信息不足时如何处理?
保留两个条目并标记疑似重复,等待可追溯证据。