SEO 百科
重新抓取
本页目录
重新抓取
重新抓取 是让引擎再访问一次某个网址，用它取回的新内容更新自己那侧的数据。Google 的说明给了使用时机：最近向网站添加了新网页，或者改过现有网页，可以用几种方法请求它重新编入索引[1]。有一条硬限制先说在前面：不受自己管理的网址无法请求[1]。
两条路按数量分
网址不多时用网址检查工具，入口在 Search Console。它能为单个网址发起抓取请求[1]。权限要求写得很明确：提交的人必须是这个资源的所有者或者完整权限用户，这里的资源指 Search Console 后台[1]。
数量大时交站点地图。站点地图是 Google 发现网址的重要渠道[1]，网站刚启动或最近做过迁移时它会帮上忙，另外还能带上备用语言版本、视频、图片和新闻网页的元数据。
时间预期
抓取用时可能从几天到几周[1]。Google 的建议是耐心等待，用索引状态报告或网址检查工具监控进度[1]。
同一网址重复请求不会更快。提交单个网址时有配额限制，Google 明确说明多次请求重新抓取同一网址并不会缩短其抓取用时[1]。
robots.txt 那一层单独刷
改动 robots.txt 之后要走的不是网址检查工具。Google 的抓取工具会在自动抓取过程中发现更改，缓存的版本每 24 小时更新一次[2]。要更快生效，就在 Search Console 的 robots.txt 报告里发请求重新抓取[2]。
这条通道影响的是整份规则文件，不是某一个页面。规则读不到时，页面上的 noindex 之类设置也不会被看到[3]。
与相邻几件事的区别
重新抓取管引擎再来一次，URL 提交管把地址交给引擎，移除工具管暂时不把某个地址显示出来[4]。三件事都发生在 Search Console 里，动作和效果各不相同。
改完内容指望它立刻反映也不成立。Google 在过时内容那一条给的态度是：网站自己有过时网址带着 404，抓取工具重新抓取时会发现这些改动并自动把过时网页删掉，这种情形不必申请紧急更新[4]。
附录
参见
参考资料
官方（境外）
- 《请求 Google 重新抓取您的网址》，Google 搜索中心。
- 《更新 robots.txt 文件》，Google 搜索中心。
- 《使用 noindex 阻止搜索引擎编入索引》，Google 搜索中心。
- 《“移除”工具和“安全搜索”举报工具》，Google Search Console 帮助。