改版或迁移时,想让新页面尽快被搜索引擎发现和收录,核心不是“提交一下就行”,而是先核对四类东西:旧地址是否还能到达新内容、新页面是否允许被抓取、站点地图是否指向最终URL、以及是否误用了robots.txt或noindex。下面这份清单按“查什么—怎么查—结果说明什么”组织,第一次做迁移也能逐项执行。
查什么:旧页面是否用301跳转到内容最接近的新页面,而不是全部跳到首页。
怎么查:从旧站导出一批有代表性的URL,用浏览器开发者工具或命令行查看响应头,确认返回301且Location指向新地址。再抽查旧站内链、导航和站点地图里出现的地址。
结果说明什么:如果旧URL返回404或302,搜索引擎可能继续保留旧地址或延迟替换;如果大量旧页面统一跳首页,新页面很难继承原有入口,收录加速也无从谈起。只有旧地址与内容最接近的新地址一一对应,迁移信号才清晰。
查什么:新页面的meta robots、HTTP响应头和robots.txt是否阻止抓取或索引。
怎么查:查看页面HTML中的<meta name="robots">,确认没有noindex;查看响应头中是否有X-Robots-Tag: noindex;打开/robots.txt,确认没有误屏蔽新目录或整站。测试环境常会留下屏蔽规则,上线后要逐条清理。
结果说明什么:只要存在一处noindex,页面即使被提交也不会进入索引;robots.txt屏蔽抓取时,搜索引擎看不到页面内容,更谈不上收录。注意,robots.txt的限制不等于可靠的索引移除,它只影响抓取,不要把它当成删除已收录页面的手段。
查什么:站点地图、导航、面包屑和正文内链是否都使用新URL,而不是旧URL或带参数的临时地址。
怎么查:打开站点地图文件,逐条检查URL是否返回200;在站内搜索旧域名或旧路径,看是否还有残留链接。对改版后新增的栏目,确认能从首页在少数几次点击内到达。
结果说明什么:站点地图不保证收录,但它能帮助发现新地址;如果站点地图里混有旧URL或404,会浪费抓取预算并让信号混乱。内部链接指向最终URL,能让抓取工具更快理解新结构。
查什么:同一内容是否存在多个可访问地址,页面是否用rel="canonical"指向首选URL。
怎么查:检查带www与不带www、http与https、带尾斜杠与不带尾斜杠的版本是否都能打开;查看页面源码中的canonical标签是否指向自己而非旧地址。
结果说明什么:多个版本同时可访问会分散收录信号;canonical指向错误会让搜索引擎选择非预期地址。若迁移后新旧域名并行,应让旧域名整体跳转到新域名,而不是两个版本都保留完整内容。
HTTPS不保证安全无漏洞或排名,它只是迁移时不应遗漏的基础项;不同搜索引擎对站点地图、抓取和索引的支持情况须分别核查。下一步,先选一批有代表性的旧URL和新URL,按上面的清单逐项核对,把发现的问题改完后,再通过对应搜索引擎的站长工具提交站点地图并观察抓取情况。