Dans l'actualité
ERUnderstand: Evaluating Vision-Language Models on Structured ER Diagrams
arXiv cs.AI · Publié le · 3 min de lecture
En 30 secondes
- Ce qui s'est passé
- ERUnderstand benchmark évalue les modèles vision-langage sur la compréhension de diagrammes entité-relation avec 2960 diagrammes annotés et représentations schéma exploitables.
- Pourquoi ça compte
- Les ingénieurs base de données et chercheurs en IA construisant des outils pour automatiser l'extraction de schémas à partir d'images de diagrammes ont besoin de métriques d'évaluation standardisées.
- Vigilance
- Les modèles peinent sur les construits complexes: entités faibles 0.28 F1, attributs multivalués 0.14 F1, relations N-aires 0.07 F1 malgré bonne récupération des éléments simples.
- language model
Les patterns derrière cette actualité
- Agentic Context Engineering (Evolving Playbook)
- Structured Reflection (Think Tool)
- Agent-Readable Web (llms.txt / NLWeb)
Chacun explique le fonctionnement de la technique, quand elle vaut son coût et où elle casse.
The Agent Architect
Un pattern, un compromis, une panne de production racontée. Un brief hebdomadaire court pour ceux qui construisent des systèmes agentiques.
Un email par semaine, désinscription en un clic. Votre adresse ne sert qu'à envoyer le brief.