Bingbot
Bing 标准爬虫,负责绝大部分抓取;可用 robots.txt 控制。Bing 的结果也为 Copilot 等 AI 体验提供 grounding。
屏蔽后会怎样
网站会从 Bing 搜索消失,也就进不了依赖 Bing 索引的 AI 体验。只想拒绝训练应使用 __usage_ai-training(Microsoft 自 2027-02-01 起执行)。
robots.txt 写法
屏蔽:
User-agent: Bingbot Disallow: /
显式放行(当有更宽的规则拦了其他机器人时有用):
User-agent: Bingbot Allow: /
官方原文
Bingbot is our standard crawler and handles most of our crawling needs each day.Microsoft 文档,核对于 2026-10-31
robots.txt 允许了,它就真能进来吗?
即使 robots.txt 欢迎 Bingbot,防火墙或 CDN 规则也可能拒绝它,而后台不会有任何提示。我们的检测会以 Bingbot 的身份实际请求,同时用浏览器和 Googlebot 做对照,避免把爬虫 IP 核验误判成拦截。
Bingbot 能访问你的网站吗?
免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。