SEO 百科

站点审计工具

本页目录

站点审计工具

站点审计工具 是用爬虫把整站抓一遍、按规则列出一堆技术问题的软件[4]。站长用它,是因为大站的页面成千上万,逐页人工检查不现实。它检查的对象是自己抓到的页面,与搜索引擎爬虫看到的内容不一定一致[1]。

解决的问题

审计工具回答四类问题:

  • 站内有没有断链和错误状态码;
  • 重定向有没有成链或成环;
  • 标题、描述、标题层级有没有缺失或重复;
  • 站内链接结构里有没有孤立页。

工具把这些问题按类型汇总,给出一份能交给开发的清单[4]。

抓取与渲染

工具的爬虫不是搜索引擎的爬虫。它按自己的规则抓页面,看到的返回码和内容可能与搜索引擎不同[1]。

渲染方式决定看到的页面。Screaming Frog 用内置的 Chromium 渲染 JavaScript 站点[4]。Sitebulb 对 JavaScript 渲染不额外收费[5]。不开启渲染,抓到的就是初始 HTML。

抓取规模决定能审多大的站。Screaming Frog 免费版限 500 个网址[4]。Sitebulb 桌面版单次可抓 50 万个网址,云端版可到 1000 万[5]。

检查项与问题分级

主流工具都报 300 多项问题[4]。数量本身不是重点,分级和解释才是。

工具通常把问题分成错误、警告和通知三类,再按影响排先后。Sitebulb 给每条提示配上解释,说明这条问题会带来什么后果[5]。

与官方工具的分工

官方工具查的是搜索引擎那边看到的情况。Google 的抓取工具会用固定的用户代理标识自己,并给出核对身份的三种方式[1]。百度把抓取诊断列在数据统计里,用来查看抓取记录[3]。

工具查的是自己抓取的结果。两边的差异本身有价值:工具抓得到、官方没抓,可能说明页面没被发现;官方抓得到、工具抓不到,可能是工具的抓取规则受限。

性能数据的来源

审计报告里的性能数字分两种。实验室数据在受控环境里跑出来,便于复现和调试。实测数据来自真实用户,更接近实际体验。

Lighthouse 在受控环境里跑一遍,给出性能、无障碍和搜索引擎优化三类评分[2]。它生成的报告属于实验室数据。

Web Almanac 同时使用 HTTP Archive 抓取、Lighthouse 报告和 CrUX 数据,说明两类数据的取法不同[6]。

实验室数字不能替代实测数字。一次跑分受机器负载影响很大,实测数据才反映访客的真实体验。

常见误用

一个误用是把工具的抓取结果当搜索引擎的抓取结果。两边用的爬虫、规则和频率都不同[1]。

另一个误用是照着问题数量优化。300 项里多数是通知级,真正影响收录的只有少数几类。

还有一个误用是只看一次跑分就下结论。Lighthouse 的分数每次运行都有波动,多次取中位数才有意义。

附录

参见

参考资料

官方(境外)

  1. 《Google 抓取工具和抓取器(用户代理)概览》,Google 搜索中心,2025-03-14 更新。
  2. 《Lighthouse 简介》,Chrome for Developers,2025-06-02 更新。

官方(国内)

  1. 《平台工具使用手册(抓取诊断)》,百度搜索资源平台,2020-08-14 更新。

第三方

  1. 《Screaming Frog SEO Spider》,Screaming Frog。
  2. 《Sitebulb》,Sitebulb。
  3. 《SEO (Chapter 5) — Web Almanac 2025》,HTTP Archive,2026-01-15。

外部链接

无。