ChatGPT-User
ChatGPT / Custom GPT 中由用户操作触发的访问,不做自动爬取;官方称 robots.txt 规则可能不适用。
屏蔽后会怎样
官方说明 robots.txt 对用户触发请求可能不生效;它也不决定能否出现在 ChatGPT 搜索中。
robots.txt 写法
屏蔽:
User-agent: ChatGPT-User Disallow: /
显式放行(当有更宽的规则拦了其他机器人时有用):
User-agent: ChatGPT-User Allow: /
官方原文
Because these actions are initiated by a user, robots.txt rules may not apply.OpenAI 文档,核对于 2026-10-31
robots.txt 允许了,它就真能进来吗?
即使 robots.txt 欢迎 ChatGPT-User,防火墙或 CDN 规则也可能拒绝它,而后台不会有任何提示。我们的检测会以 ChatGPT-User 的身份实际请求,同时用浏览器和 Googlebot 做对照,避免把爬虫 IP 核验误判成拦截。
OpenAI 的其他爬虫
GPTBot
OpenAI
抓取可能用于训练 OpenAI 生成式基础模型的内容。
OAI-SearchBot
OpenAI
用于在 ChatGPT 搜索功能中展示网站。
OAI-AdsBot
OpenAI
核查在 ChatGPT 投放广告的落地页是否安全合规,也可能用落地页内容判断何时展示该广告。
ChatGPT-User 能访问你的网站吗?
免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。