Loading...
Agentenlesbares Web (llms.txt / NLWeb)
Angebotsseitige Verträge, die den Inhalt einer Website direkt für Agenten zugänglich machen, anstatt sie zu zwingen, das gerenderte HTML auszulesen. llms.txt (Jeremy Howard, 2024) ist ein kuratierter Markdown-Index unter /llms.txt samt .md-Schattenseiten, die einem LLM zur Inferenzzeit hochdichte, navigationsfreie Inhalte liefern. Microsoft NLWeb (2025, geleitet von R.V. Guha, Mitbegründer von Schema.org) geht mit einem /ask-Endpunkt in natürlicher Sprache noch weiter, der strukturiertes JSON zurückgibt, das in den eigenen Schema.org-Daten der Website verankert ist, wobei jede NLWeb-Instanz zugleich als MCP-Server fungiert. Zusammen definieren sie die agentenlesbare Website: das leseseitige Gegenstück zu robots.txt für das agentische Web.
In 30 seconds
- What
- Die Website veröffentlicht kuratiertes Markdown unter /llms.txt sowie .md-Schattenseiten, dazu optional einen /ask-Endpunkt mit strukturiertem JSON, damit Agenten Inhalte abrufen, ohne HTML zu scrapen.
- When to use
- Sie betreiben einen Dienst oder eine Content-Website und wollen, dass Agenten zuverlässig, korrekt und im großen Maßstab auf Ihre Daten zugreifen, ohne gerenderte Seiten zu parsen.
- Watch out
- Erfordert zwei Inhaltsflächen, die synchron bleiben müssen; eine veraltete oder unvollständige /llms.txt macht den Zweck zunichte und Agenten scrapen trotzdem wieder.
Loading technique guide…