llms.txt 真的有用吗？
诚实的答案
大体上没用 —— 但对于一个比炒作所宣称的窄得多的任务,部分有用。llms.txt 不影响搜索排名,不会让 AI 助手引用你,如今也几乎无人抓取。它真正做到的,是为那些确实读取它的智能体提供廉价而有用的打包 —— 就凭这个任务,它仍然值得放在你的根目录里。
一个检查 llms.txt 的扫描器有义务告诉你不加修饰的版本,以下是有出处的事实。
数据怎么说
Ahrefs 测量了 137,210 个在 2026 年 5 月有真实流量的域名,并对其 /llms.txt 文件的每个请求进行了分类。97% 的文件收到零请求 —— 根本没有任何东西来抓取。在获得流量的约 3% 中,96% 的请求来自各类机器人,而所有 AI 机器人类别加起来只占这本已微小流量的约五分之一。
这与厂商的表态 —— 或者说沉默 —— 一致: 没有任何 AI 厂商发布过声明,说其爬虫会消费第三方的 llms.txt。与该文件关联最深的公司 —— Mintlify、Yoast、Rank Math、Shopify —— 全都是它的生成方,不是消费方。
Google 的立场
Google 异常直接。2025 年 4 月,John Mueller 将 llms.txt 比作 keywords meta 标签:"没有任何 AI 服务说过他们在用 llms.txt —— 看看你的服务器日志就知道,他们甚至不检查它。" 2026 年 6 月,他称其价值"目前纯属猜测"。同月,Google Search Central 更新日志添加了正式指南: Google 搜索不使用 llms.txt —— 对排名既无帮助也无损害。
然而,同一家公司的 Lighthouse 现在带有智能体浏览审计类别,会检查你的 llms.txt。这两个立场并不矛盾 —— 它们划出的界线与我们相同: llms.txt 不是搜索信号,而是智能体基础设施。
llms.txt 仍然有用的地方
- 按需抓取的智能体。受用户指派来到你网站的智能体,可以只取一个文件就了解你提供什么、有哪些端点、机器可读的表面在哪里 —— 而不必爬取和猜测。这在今天是有效的;只是它不是主动消费。
- 交叉引用枢纽。llms.txt 中最有价值的行,是指向你的 MCP 端点、OpenAPI 规范和支付发现文件的行 —— 这些是智能体用其他方式无法可靠找到的东西。这正是 AgentGrade 的 llms.txt 检查真正评分的内容。
- 只需十分钟。这种不对称很重要: 成本近乎为零,收益真实(虽然狭窄),还是生态一旦成熟的免费保险。
我们评分什么 —— 不评分什么
AgentGrade 将 llms.txt 作为智能体可用性信号评分: 是否存在、能否解析、是否给智能体可导航的结构和交叉引用。我们从未将它作为 SEO 或引用杠杆评分,因为没有证据表明它是。如果有厂商向你兜售 llms.txt 作为排名手段,上面的数字就是你的反驳。
常见问题
llms.txt 对 SEO 有帮助吗？
没有。Google 的书面立场是搜索不使用它 —— 既无帮助也无损害。它的用途是智能体可用性,不是排名。
ChatGPT 或 Claude 会读取 llms.txt 吗？
OpenAI 和 Anthropic 都没有发布声明说他们的系统会抓取第三方 llms.txt。两家公司都为自己的文档站点发布 llms.txt —— 这说明他们认为这个格式是有用的打包方式,而不是说他们的爬虫会消费你的文件。
我还应该添加 llms.txt 吗？
应该 —— 因为只需几分钟,能帮助确实读取它的按需智能体,而且它是指向你的 MCP 端点、OpenAPI 规范和支付文件的交叉引用的天然载体。用 llms.txt 验证器验证它。
既然没人抓取,AgentGrade 为什么还检查它？
因为我们的分数衡量的是到达的智能体能否使用你的网站,而不是有多少到达。一个可解析、带真实交叉引用的 llms.txt 能显著缩短智能体到达你能力的路径 —— 这是我们评分的唯一主张。