改版或迁移时,要优先核对的是:Google 是否还能抓到新页面、是否允许索引、以及旧地址是否正确指向新地址。收录不是“提交后就一定发生”的结果,而是一连串可检查条件的结果。时间和人手有限时,先处理会直接阻断抓取和索引的项目,再处理体验和性能问题。
在 Search Console 的“网页”报告和“站点地图”报告中,常见现象包括:已收录页面数量下降、新页面长时间显示“已发现但未编入索引”、抓取统计出现异常、站点地图读取成功但页面仍未被索引。这些现象只是线索,不能单独证明某个原因。例如“已发现但未编入索引”可能来自内容质量、重复页面、服务器响应慢,也可能来自内部链接不足。
观察时先记录三件事:受影响的是全站还是某个目录;问题从哪天开始;改版或迁移前后 URL 结构有没有变化。没有这三项,后面的判断很容易变成猜测。
Disallow: /,Google 无法抓取页面。robots.txt 的抓取限制不等于可靠的索引移除,它只阻止抓取,不保证已收录页面立刻消失。noindex 会明确阻止索引。改版时模板继承错误,可能让整批页面带上 noindex。这些项目要分开检查,不能因为“站点地图提交了”就认为收录没问题。站点地图不保证收录,它只是帮助发现 URL 的参考信息。
按“先阻断、后优化”的顺序处理:
noindex。如果只有半天时间,先做第 1 到第 3 步。它们直接决定 Google 能不能进入新页面、能不能把旧地址对应到新地址。第 4 到第 6 步可以在随后几天补齐。
处理完成后,不要只看一天的数据。复查时关注:抓取统计是否恢复、新页面是否开始出现在索引中、旧 URL 是否逐渐被新 URL 替代、站点地图中的页面是否被读取。不同页面的恢复速度不同,没有固定见效时间,也不保证一定收录。
复查还要区分“已经定位的原因”和“可能原因”。例如页面未被索引,可能是 noindex,也可能是内容重复或服务器响应问题。只有当你确认某个设置确实存在并已修正,才能把它称为已定位的原因。
下一步:从旧 URL 中随机抽 20 条,逐条记录状态码、跳转目标和 canonical,形成一张核对表。这张表比泛泛检查全站更快暴露迁移中的断点。