SEO 百科
Yandex 的内容移除
本页目录
Yandex 的内容移除
Yandex 的内容移除指的是让页面从 Yandex 搜索结果里退出,或者把展示的内容改掉[1]。Yandex 把情形先分成两类,页面已经删除的和页面要保留的,两类对应的手段不同。分开之后,时效和配合关系才有统一答案。
屏蔽索引的两条路
Yandex 先问一个问题:页面还在不在网站上[1]。
- 页面已从网站删除:在
robots.txt里加Disallow指令,或者让服务器返回404、403、410状态码[1]。 - 页面要保留但不该展示:给页面加
noindex标记,或者让服务器返回404、403、410状态码[1]。
第二类的配合关系要记牢:这类页面不要再用 robots.txt 屏蔽,否则 Yandex 的机器人抓不到页面,也就读不到 noindex[1]。
时效上,robots.txt 屏蔽、状态码、noindex 三种方式,都是索引机器人发现指令后一周内从搜索数据库里移除[1]。页面有时仍会出现在结果里,例如别的网站链向它[1]。
加速移除的工具
不想等计划抓取,可以在 Yandex Webmaster 里主动提交[1]。
加速入口各家都有。Bing 把 Block URLs 的有效期定在 90 天,Google 的移除请求约六个月失效[5][6]。Yandex 这边不公布固定期限,真正生效的还是页面本身的状态[1]。
被移除的网址会出现在 Webmaster 里,位置在索引下的可搜索页面;其中的已排除页列表可以用来核对移除是否生效[3]。
被排除页面的另外几种成因
页面退出结果,未必是站长动了手[3]。
- 算法判定页面价值低或需求低时,会不把它放进结果;这不属于违规,站点的整体排名不受限制[3]。
- 页面被判为重复页时,Yandex 会并入重复组,只留其中一个[3]。
- 页面被
noindex标记挡住时,状态会显示因 noindex 元素被禁止[3]。
这几种状态都能在可搜索页面的已排除页里按状态筛选[3]。
版权与个人信息
Yandex 另开了一条版权投诉通道,页面在 yandex.com 域下的服务适用[4]。
有一点要提前知道:Yandex 不保存第三方网页的内容,它按公开网页生成索引,也不控制那些网页[4]。所以版权问题更有效的做法是先找源站或主机商[4]。个人信息和遗忘权的申请另有专门表单[4]。
可照抄的标记与规则
给页面加 noindex,写进 <head>。
<html>
<head>
<meta name="robots" content="noindex" />
</head>
<body>...</body>
</html>
不方便改页面时改用响应标头,Yandex 的示例是这样写的[2]:
HTTP/1.1 200 OK
Date: Tue, 25 May 2010 21:42:43 GMT
X-Robots-Tag: noindex
只针对 Yandex 声明时,把用户代理写成 yandex[2]。
<meta name="yandex" content="noindex" />
各家爬虫的用户代理名字不同,Yandex 用的是 Yandex,百度的叫 Baiduspider[7]。Yandex 支持的指令包括 noindex、nofollow、none、noarchive、noyaca 等[2]。
常见误用
一个误用是拿 robots.txt 去管收录。Disallow 只挡抓取,已经收录的页面不会因此退出。
另一个误用是给页面同时加 noindex 和 robots.txt 屏蔽。两者一起用,Yandex 读不到页面里的标记[1]。
还有一种误用是以为提交了移除就永久消失。移除工具只是不等抓取,真正生效的还是页面本身的状态[1]。
最后一种误用是把算法自动排除当成处罚。价值低或需求低的页面被排除,属于正常判定,站点整体不受限制[3]。各平台处理失效页面的前提一致,都要求页面真实返回状态码,百度还把死链提交限定在 404[8]。
附录
参见
参考资料
官方(境外)
- 《How do I remove pages from the search?》,Yandex Webmaster。
- 《Robots meta tag and X-Robots-Tag HTTP header》,Yandex Webmaster。
- 《Searchable pages》,Yandex Webmaster。
- 《Copyright Notice Policy》,Yandex。
- 《How to Remove Content from Bing and Copilot》,Bing 网站管理员工具。
- 《Remove a page hosted on your site from Google》,Google 搜索中心,2025-12-31 更新。
官方(国内)
- 《轻松两步,教你快速识别百度蜘蛛》,百度搜索资源平台,2020-05-19。
第三方
- 《百度官方解答:如何快速处理网站死链》,站长之家,2022-09-09。
外部链接
无。