首页 / AI 爬虫 / Bingbot

Bingbot

运营方Microsoft
用途搜索
遵守 robots.txt遵守
来源官方文档 ↗

Bing 标准爬虫,负责绝大部分抓取;可用 robots.txt 控制。Bing 的结果也为 Copilot 等 AI 体验提供 grounding。

屏蔽后会怎样

网站会从 Bing 搜索消失,也就进不了依赖 Bing 索引的 AI 体验。只想拒绝训练应使用 __usage_ai-training(Microsoft 自 2027-02-01 起执行)。

robots.txt 写法

屏蔽:

User-agent: Bingbot
Disallow: /

显式放行(当有更宽的规则拦了其他机器人时有用):

User-agent: Bingbot
Allow: /

官方原文

Bingbot is our standard crawler and handles most of our crawling needs each day.Microsoft 文档,核对于 2026-10-31

robots.txt 允许了,它就真能进来吗?

即使 robots.txt 欢迎 Bingbot,防火墙或 CDN 规则也可能拒绝它,而后台不会有任何提示。我们的检测会以 Bingbot 的身份实际请求,同时用浏览器和 Googlebot 做对照,避免把爬虫 IP 核验误判成拦截。

Bingbot 能访问你的网站吗?

免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。