影视采集站如何做标题去重
多采集源会导致同一部剧出现多个标题版本，例如带年份、带清晰度、带平台名。标题不归一，会产生重复详情页和权重分散。
清理无效后缀
去掉“高清版”“全集”“在线播放”“某某平台”等非剧名内容，保留真实剧名。
建立别名表
同一部剧的简称、别名、繁简体名称应归并到一个 canonical 详情页。
组合去重键
推荐使用剧名 + 年份 + 集数 + 类型作为去重键，缺字段时再用简介相似度辅助判断。
更新策略
去重后保留最新播放源和更新时间，不要让多个重复 URL 同时出现在 sitemap 中。