首页 / AI 爬虫 / GPTBot

GPTBot

运营方OpenAI
用途训练
遵守 robots.txt遵守
来源官方文档 ↗

抓取可能用于训练 OpenAI 生成式基础模型的内容;禁止 GPTBot = 表示内容不应用于训练。

屏蔽后会怎样

内容不会被 OpenAI 用于训练生成式基础模型;不影响 ChatGPT 搜索展示(那由 OAI-SearchBot 控制)。

robots.txt 写法

屏蔽:

User-agent: GPTBot
Disallow: /

显式放行(当有更宽的规则拦了其他机器人时有用):

User-agent: GPTBot
Allow: /

官方原文

Disallowing GPTBot indicates a site's content should not be used in training generative AI foundation models.OpenAI 文档,核对于 2026-10-31

OpenAI 的其他爬虫

OAI-SearchBot
OpenAI

用于在 ChatGPT 搜索功能中展示网站。

ChatGPT-User
OpenAI

ChatGPT / Custom GPT 中由用户操作触发的访问,不做自动爬取。

OAI-AdsBot
OpenAI

核查在 ChatGPT 投放广告的落地页是否安全合规,也可能用落地页内容判断何时展示该广告。

GPTBot 能访问你的网站吗?

免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。