Google-Extended

独立的控制 token，不单独发请求：控制 Google 抓到的内容能否用于训练未来的 Gemini 模型，以及用于 Gemini Apps / Vertex AI 的 grounding。不影响 Google 搜索收录与排名。

屏蔽后会怎样

内容不用于训练后续 Gemini 模型，同时也不会用于 Gemini Apps 与 Vertex AI 的 grounding（即不会在这些回答里被引用、带来点击）；Google 搜索不受影响。

robots.txt 写法

为它单独写一组规则。它不改变爬虫抓什么，只决定内容能否被这样使用：

User-agent: Google-Extended
Disallow: /

官方原文

Google-Extended is a standalone product token that web publishers can use to manage whether content Google crawls from their sites may be used for training future generations of Gemini models ... and for grounding ... in Gemini Apps and Grounding with Google Search on Vertex AI. Google-Extended does not impact a site's inclusion in Google Search nor is it used as a ranking signal in Google Search.Google 文档，核对于 2026-10-31

Google 的其他爬虫