YandexBot

Yandex 主索引爬虫。Yandex 的 AI 答案（Yandex AI）从已收录页面生成；只想退出 AI 答案可用 YandexAdditional。

屏蔽后会怎样

网站会从 Yandex 搜索消失，也进不了基于其索引的 Yandex AI 答案。

robots.txt 写法

屏蔽：

User-agent: YandexBot
Disallow: /

显式放行（当有更宽的规则拦了其他机器人时有用）：

User-agent: YandexBot
Allow: /

官方原文

The main indexing robot.Yandex 文档，核对于 2026-11-04

robots.txt 允许了，它就真能进来吗？

即使 robots.txt 欢迎 YandexBot，防火墙或 CDN 规则也可能拒绝它，而后台不会有任何提示。我们的检测会以 YandexBot 的身份实际请求，同时用浏览器和 Googlebot 做对照，避免把爬虫 IP 核验误判成拦截。