Applebot
Apple 搜索爬虫(Spotlight、Siri、Safari);抓到的数据也可能用于训练 Apple 基础模型,训练用途由 Applebot-Extended 控制。没有 Applebot 专属组但有 Googlebot 组时,Applebot 按 Googlebot 规则执行。
屏蔽后会怎样
网站不会出现在 Spotlight、Siri、Safari 等 Apple 搜索功能中。只想拒绝训练应禁止 Applebot-Extended。
robots.txt 写法
屏蔽:
User-agent: Applebot Disallow: /
显式放行(当有更宽的规则拦了其他机器人时有用):
User-agent: Applebot Allow: /
官方原文
If robots instructions don't mention Applebot but mention Googlebot, the Apple robot will follow Googlebot instructions.Apple 文档,核对于 2026-10-31
robots.txt 允许了,它就真能进来吗?
即使 robots.txt 欢迎 Applebot,防火墙或 CDN 规则也可能拒绝它,而后台不会有任何提示。我们的检测会以 Applebot 的身份实际请求,同时用浏览器和 Googlebot 做对照,避免把爬虫 IP 核验误判成拦截。
Apple 的其他爬虫
Applebot 能访问你的网站吗?
免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。