首页 / AI 爬虫 / MistralAI-Index

MistralAI-Index

运营方Mistral AI
用途搜索
遵守 robots.txt遵守
来源官方文档 ↗

为 Mistral 搜索建立索引,用来回答 Vibe 里用户的提问。官方说明抓到的内容不用于任何生成式 AI 训练。

屏蔽后会怎样

你的页面进不了 Mistral 搜索索引,Vibe 回答问题时更难找到和引用你。

robots.txt 写法

屏蔽:

User-agent: MistralAI-Index
Disallow: /

显式放行(当有更宽的规则拦了其他机器人时有用):

User-agent: MistralAI-Index
Allow: /

官方原文

MistralAI-Index is for automated crawling of the web for indexing purposes only. It indexes content for Mistral search, which helps answer user questions in Vibe. Content crawled by MistralAI-Index is not used for generative AI training of any kind.Mistral AI 文档,核对于 2026-11-04

robots.txt 允许了,它就真能进来吗?

即使 robots.txt 欢迎 MistralAI-Index,防火墙或 CDN 规则也可能拒绝它,而后台不会有任何提示。我们的检测会以 MistralAI-Index 的身份实际请求,同时用浏览器和 Googlebot 做对照,避免把爬虫 IP 核验误判成拦截。

Mistral AI 的其他爬虫

MistralAI-User
Mistral AI

用户在 Mistral 的助手里提问时按需访问网页并在回答中附上来源链接。

MistralAI-Training
Mistral AI

抓取网页内容,用于构建训练 Mistral 生成式 AI 模型的数据集。

MistralAI-Index 能访问你的网站吗?

免费,无需注册。我们以 18 种不同身份请求你的首页,告诉你每个请求拿到了什么。