GPTBot
抓取可能用于训练 OpenAI 生成式基础模型的内容;禁止 GPTBot = 表示内容不应用于训练。
屏蔽后会怎样
内容不会被 OpenAI 用于训练生成式基础模型;不影响 ChatGPT 搜索展示(那由 OAI-SearchBot 控制)。
robots.txt 写法
屏蔽:
User-agent: GPTBot Disallow: /
显式放行(当有更宽的规则拦了其他机器人时有用):
User-agent: GPTBot Allow: /
官方原文
Disallowing GPTBot indicates a site's content should not be used in training generative AI foundation models.OpenAI 文档,核对于 2026-10-31
OpenAI 的其他爬虫
OAI-SearchBot
OpenAI
用于在 ChatGPT 搜索功能中展示网站。
ChatGPT-User
OpenAI
ChatGPT / Custom GPT 中由用户操作触发的访问,不做自动爬取。
OAI-AdsBot
OpenAI
核查在 ChatGPT 投放广告的落地页是否安全合规,也可能用落地页内容判断何时展示该广告。
GPTBot 能访问你的网站吗?
免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。