Agent Policy Builder

决定 AI 爬虫和智能体可以如何使用你的网站

选择允许 AI 训练、AI 搜索和 AI 助手做什么，即可获得可添加到网站的 robots.txt 段落。

无需安装
所有设备
100 种语言

示例输出

虚构示例

# Example Ceramics

> Handmade ceramics, shipped from Tallinn.

AI use of this site: model training not permitted; AI search and answers permitted.

## Products

- [Catalogue](https://example.com/shop): every piece in stock

这是为一家虚构网店制作的示例。你的文件会按你自己的选择生成。

你的选择

AI 模型训练收集网页用于训练 AI 模型的爬虫。允许阻止

AI 搜索与问答为 AI 搜索和问答引擎索引网页的爬虫。允许阻止

按用户请求访问的 AI 助手在用户提出请求时打开网页的助手。部分公司可能不会对这类访问应用 robots.txt。允许阻止

普通搜索爬虫（如 Googlebot 和 Bingbot）不受影响。

不让已允许的 AI 爬虫访问的路径（可选）每行一个，最多 10 个，每个都以 / 开头。在此段落中点名的爬虫只会遵守这里的规则，因此请把你已对所有爬虫屏蔽的路径也列在这里。站点地图地址（可选）

免费段落还是 Pro Kit：付费多了什么？

免费工具根据你的选择生成 robots.txt 段落。Pro Kit 另外提供其他文件和安装指南。

Pro Kit 为你提供

内容一致的 robots.txt、llms.txt 和 ai.txt。
自动加入你这类网站通常不让 AI 爬虫访问的路径。
用你的语言和英文撰写的 AI 使用条款摘要。
在 WordPress、Next.js、Shopify 及大多数其他网站上，每个文件应放在哪里。

免费段落与 Pro Kit 对比

免费Pro Kit

robots.txt AI 段落有有

适合你网站类型的常用路径无有

llms.txt 和 ai.txt无有

条款摘要和安装指南无有

一次性付款 $6.99。不是订阅，也没有任何自动续费。如果无法生成套件或被重复扣款，将全额退款。

Pro Kit：全部文件，随时可安装

同样的选择，一次下载，并附上配套的文件和指南。

robots.txt AI 段落，包含你这类网站的常用路径
llms.txt：面向 AI 系统的网站简介，附上你的链接
ai.txt，写明你对 AI 训练的选择（一种约定）
用你的语言和英文撰写的 AI 使用条款摘要，供你审阅
适用于大多数网站以及 WordPress、Next.js 和 Shopify 的安装指南

网站类型网站名称网站地址一句话简介（可选）

许可申请联系方式（可选）电子邮件地址或网页地址。会显示在 llms.txt 和条款摘要中。

llms.txt 链接（可选）

最多 20 个重要页面。如果没有链接，llms.txt 会指向你的首页。

$6.99，一次性付款。可在 7 天内下载，最多 10 次。

如果无法生成套件，我们会退款给你。

你填写的内容会保留在此浏览器中，用于重新生成套件；我们只随付款保存这些内容的指纹。如需再次下载，请使用此浏览器，或输入相同的值。

我要求立即交付套件，并了解下载一旦开始，我将失去撤回权。

通过 Stripe 安全支付。价格以您所在国家/地区的当地货币显示。

服务条款 · 退款政策 · 隐私政策