Muster werden geladen…
Agentenlesbares Web (llms.txt / NLWeb)
Angebotsseitige Verträge, die den Inhalt einer Website direkt für Agenten zugänglich machen, anstatt sie zu zwingen, das gerenderte HTML auszulesen. llms.txt (Jeremy Howard, 2024) ist ein kuratierter Markdown-Index unter /llms.txt samt .md-Schattenseiten, die einem LLM zur Inferenzzeit hochdichte, navigationsfreie Inhalte liefern. Microsoft NLWeb (2025, geleitet von R.V. Guha, Mitbegründer von Schema.org) geht mit einem /ask-Endpunkt in natürlicher Sprache noch weiter, der strukturiertes JSON zurückgibt, das in den eigenen Schema.org-Daten der Website verankert ist, wobei jede NLWeb-Instanz zugleich als MCP-Server fungiert. Zusammen definieren sie die agentenlesbare Website: das leseseitige Gegenstück zu robots.txt für das agentische Web.
In 30 Sekunden
- Was
- Die Website veröffentlicht kuratiertes Markdown unter /llms.txt sowie .md-Schattenseiten, dazu optional einen /ask-Endpunkt mit strukturiertem JSON, damit Agenten Inhalte abrufen, ohne HTML zu scrapen.
- Wann einsetzen
- Sie betreiben einen Dienst oder eine Content-Website und wollen, dass Agenten zuverlässig, korrekt und im großen Maßstab auf Ihre Daten zugreifen, ohne gerenderte Seiten zu parsen.
- Achtung
- Erfordert zwei Inhaltsflächen, die synchron bleiben müssen; eine veraltete oder unvollständige /llms.txt macht den Zweck zunichte und Agenten scrapen trotzdem wieder.
Fragen Sie den KI-Experten zu diesem Pattern
Öffnet den Assistenten mit vorbereiteter Frage. Sie prüfen sie vor dem Senden.
Agentenlesbares Web (llms.txt / NLWeb): Überblick
Angebotsseitige Verträge, die den Inhalt einer Website direkt für Agenten zugänglich machen, anstatt sie zu zwingen, das gerenderte HTML auszulesen. llms.txt (Jeremy Howard, 2024) ist ein kuratierter Markdown-Index unter /llms.txt samt .md-Schattenseiten, die einem LLM zur Inferenzzeit hochdichte, navigationsfreie Inhalte liefern. Microsoft NLWeb (2025, geleitet von R.V. Guha, Mitbegründer von Schema.org) geht mit einem /ask-Endpunkt in natürlicher Sprache noch weiter, der strukturiertes JSON zurückgibt, das in den eigenen Schema.org-Daten der Website verankert ist, wobei jede NLWeb-Instanz zugleich als MCP-Server fungiert. Zusammen definieren sie die agentenlesbare Website: das leseseitige Gegenstück zu robots.txt für das agentische Web.
- Curated /llms.txt Markdown index of a site
- .md shadow pages for clean, high-density content
- NLWeb /ask natural-language query endpoint
- Structured JSON grounded in Schema.org data
- Every NLWeb instance also acts as an MCP server
- Retrieval without brittle HTML scraping
The Agent Architect
Ein Pattern, ein Tradeoff, eine Produktionspanne. Ein kurzes wöchentliches Briefing für alle, die agentische Systeme bauen.
Wöchentliche E-Mail, Abmeldung mit einem Klick. Ihre Adresse wird nur für das Briefing verwendet.
Quellen
Die Veröffentlichungen, Spezifikationen und Repositories, auf denen dieses Muster beruht.
Vom Ingenieur hinter diesem Katalog
Lassen Sie Ihre Agenten-Architektur prüfen
Diese Seite dokumentiert ein Pattern. Ihr System betreibt Dutzende, und die meisten Ausfälle entstehen im Zusammenspiel. Lassen Sie den gesamten Entwurf an den 288 Patterns dieses Katalogs messen: Architektur, Zuverlässigkeit, Evaluation und Kosten, jeder Befund verknüpft mit dem Pattern, das ihn behebt.
750 € statt 1.500 €, eine Woche, schriftlicher Bericht und Walkthrough-Call, bis 30. September