Loading...
📄
智能体可读网页(llms.txt / NLWeb)
一类供给侧契约,将站点内容直接暴露给智能体,而不是迫使它们去抓取渲染后的 HTML。llms.txt(Jeremy Howard,2024 年)是位于 /llms.txt 的经过精选的 Markdown 索引,外加 .md 影子页面,在推理时为 LLM 提供高密度、无需导航的内容。Microsoft NLWeb(2025 年,由 Schema.org 联合创始人 R.V. Guha 主导)更进一步,提供一个自然语言的 /ask 端点,返回以站点自身 Schema.org 数据为依据的结构化 JSON,而且每个 NLWeb 实例同时兼作 MCP 服务器。两者共同定义了智能体可读的站点,即面向智能体网络、对应于 robots.txt 的读取路径版本。
复杂度: medium智能体经济与互操作协议
In 30 seconds
- What
- 站点在 /llms.txt 发布经过整理的 Markdown 以及 .md 影子页面,并可选提供返回结构化 JSON 的 /ask 端点,使代理无需抓取 HTML 即可获取内容。
- When to use
- 你运营服务或内容站点,希望代理无需解析渲染后的页面就能可靠、准确、大规模地访问你的数据。
- Watch out
- 需要让两套内容表面保持同步;过时或不完整的 /llms.txt 会让方案失去意义,代理最终仍会退回到抓取。
Loading technique guide…