跳到正文

SEO 收录排查

Search Console 站点地图“无法抓取”怎么排查?

浏览器能显示 sitemap.xml,只证明这次浏览器请求拿到了响应。Search Console 的读取结果还取决于 Google 当时访问的地址与服务器返回内容。先收集失败证据,再决定修复哪一层,比反复提交或批量加文章更容易定位问题。

更新于

1. 保留具体错误和提交对象

记录 Search Console 资源名称、实际提交地址、状态、最后读取时间和详细错误。如果只看到“无法抓取”,不要直接认定是 XML 格式问题,也不要根据一个截图推断 Google 被封禁。

检查是否在正确的已验证资源内提交,以及网址是否意外用了测试域名、错误协议或不匹配的路径。该操作需要相应 Search Console 权限,公开网页检查不能代替账户内报告。

Google: Manage sitemaps with the Sitemaps report

2. 检查响应,而不只看浏览器外观

核对最终状态码和完整响应内容。一个返回 200 的登录页面、验证码页面或通用首页仍然不是有效的站点地图。排查重定向链、间歇超时、403、429 和 5xx;记录时间,方便与服务日志对照。

XML 在浏览器里以树状还是连续文字显示,不足以判断 Google 能否处理。检查声明、根元素、sitemap namespace 和实际 URL;不要为了改变外观而删掉正确的地址。

  • 公开请求能得到 XML,而不是 HTML 错误页。
  • 使用绝对地址,特殊字符正确转义。
  • 每个 loc 对应真实、公开、希望收录的规范页面。
  • 更新日期来自真实修改,不是每次部署的当前时间。

Google: Build and submit a sitemap

3. 对照防火墙与服务器日志

如果普通访问成功但报告持续失败,检查失败时间附近的 CDN、防火墙和服务器日志,确认是否有挑战、访问限制或临时故障。浏览器与抓取请求可能走不同路径;先看证据,再收窄修复范围。

只改 User-Agent 进行请求不能证明自己就是 Googlebot,也不能完整模拟 Google 的访问条件。不要仅凭请求头就放行敏感接口;排查范围应限定在公开内容和站点地图。

Google: Manage sitemaps with the Sitemaps report

4. 站点地图成功后检查真实页面

站点地图告诉搜索引擎有哪些地址,不要求搜索引擎逐个收录。用网址检查工具检查一篇代表文章及其语言版本,分别查看已索引信息与实时测试。检查响应、robots、noindex、规范网址以及正文是否可访问。

实时测试通过说明当前测试条件下页面可访问,不等于已经索引。Google 选择了不同规范网址、发现重复内容或认为页面价值不足时,需要结合该具体原因修复。

Google: URL Inspection tool

5. 修复后用报告确认,不反复制造新提交

修复可验证的问题后,在对应资源重新提交站点地图并观察读取记录;必要时对少量重要页面请求重新抓取。记录修改和提交时间,不把提交成功提示写成已收录。

普通文章不适用仅面向特定页面类型的 Indexing API。重复提交相同内容也不能保证更快索引。等待期间可以完善内链和正文,但不要反复改地址或无理由改 canonical。

Google: Ask Google to recrawl your URLs

6. 一份可复用的排查记录

示例:提交 /sitemap.xml 后报告失败,普通请求返回 200;继续检查发现响应正文为 HTML 挑战页。这个例子的修复目标是公开 XML 的访问条件,而不是文章标题。它是假设的诊断演示,不是本站某次事故的已确认原因。

每条记录保留:失败地址、报告时间、状态码、响应类型、实际正文类型、相关日志、修复动作和复查结果。只有最后读取记录更新且状态成功,才能报告“Google 已读取”;具体文章是否收录继续查看页面报告。

常见问题

浏览器能打开站点地图,就说明 Google 可以读取吗?

不能。它只证明该次浏览器请求成功。Google 的请求可能在不同时间遭遇限流、挑战或服务故障,需要具体报告或日志佐证。

站点地图读取成功是否等于所有文章已收录?

不等于。读取、发现、抓取和索引是不同状态。使用 Search Console 页面报告和网址检查确认具体页面状态。

把这份指南用到你的业务里

收录条件排查完成后,需要优化访客咨询路径?与 LanderGrow 团队沟通页面创建、线索表单和转化事件。

联系客户成功经理

参考资料

继续阅读

联系客户成功经理

联系客户成功经理

添加 WhatsApp 或 Telegram,沟通开户、订阅或付款需求。

添加失败或没有Telegram或WhatsApp?

其他方式请留下您的联系方式,我们将在 10 分钟内联系您。