正在加载模式…
智能体可读网页(llms.txt / NLWeb)
一类供给侧契约,将站点内容直接暴露给智能体,而不是迫使它们去抓取渲染后的 HTML。llms.txt(Jeremy Howard,2024 年)是位于 /llms.txt 的经过精选的 Markdown 索引,外加 .md 影子页面,在推理时为 LLM 提供高密度、无需导航的内容。Microsoft NLWeb(2025 年,由 Schema.org 联合创始人 R.V. Guha 主导)更进一步,提供一个自然语言的 /ask 端点,返回以站点自身 Schema.org 数据为依据的结构化 JSON,而且每个 NLWeb 实例同时兼作 MCP 服务器。两者共同定义了智能体可读的站点,即面向智能体网络、对应于 robots.txt 的读取路径版本。
30秒速览
- 是什么
- 站点在 /llms.txt 发布经过整理的 Markdown 以及 .md 影子页面,并可选提供返回结构化 JSON 的 /ask 端点,使代理无需抓取 HTML 即可获取内容。
- 何时使用
- 你运营服务或内容站点,希望代理无需解析渲染后的页面就能可靠、准确、大规模地访问你的数据。
- 注意
- 需要让两套内容表面保持同步;过时或不完整的 /llms.txt 会让方案失去意义,代理最终仍会退回到抓取。
向AI专家咨询此模式
打开助手并预填您的问题,发送前可先确认。
智能体可读网页(llms.txt / NLWeb): 概览
一类供给侧契约,将站点内容直接暴露给智能体,而不是迫使它们去抓取渲染后的 HTML。llms.txt(Jeremy Howard,2024 年)是位于 /llms.txt 的经过精选的 Markdown 索引,外加 .md 影子页面,在推理时为 LLM 提供高密度、无需导航的内容。Microsoft NLWeb(2025 年,由 Schema.org 联合创始人 R.V. Guha 主导)更进一步,提供一个自然语言的 /ask 端点,返回以站点自身 Schema.org 数据为依据的结构化 JSON,而且每个 NLWeb 实例同时兼作 MCP 服务器。两者共同定义了智能体可读的站点,即面向智能体网络、对应于 robots.txt 的读取路径版本。
- Curated /llms.txt Markdown index of a site
- .md shadow pages for clean, high-density content
- NLWeb /ask natural-language query endpoint
- Structured JSON grounded in Schema.org data
- Every NLWeb instance also acts as an MCP server
- Retrieval without brittle HTML scraping
The Agent Architect
每周一个模式、一个权衡、一个生产事故案例。为构建智能体系统的人准备的每周简报。
每周一封邮件,一键退订。您的地址仅用于发送简报。
参考资料
该模式所依据的论文、规范和代码仓库。
由本目录背后的工程师执行
为你的智能体架构做一次评审
本页讲的是一个模式。真实系统会同时跑几十个,而多数故障恰恰出在它们的衔接处。我们按本目录的 288 个模式评审你的整体设计:架构、可靠性、评测与成本,每一条结论都对应到能修复它的模式。
€750(原价 €1,500),一周交付,书面报告加讲解通话,9月30日前