Новости

Parsed, Plausible, Wrong: Output Format Controls Silent Errors in Small-Model Semantic Parsing

arXiv cs.AI · Опубликовано 12 ноября 2026 г. · 3 мин чтения

За 30 секунд

Что произошло: Small language models produce grammatically valid but semantically wrong parse trees silently. Using natural language output format instead of symbolic notation cuts silent errors by 2.3x.
Почему это важно: You deploy fine-tuned small parsers for structured tasks like order processing where wrong outputs go undetected downstream without explicit validation.
На что обратить внимание: The study uses one benchmark (pizza ordering). Results may not generalize to other semantic parsing domains or different model architectures and sizes.

Каждый разбирает, как работает техника, когда она оправдывает затраты и где ломается.

Один паттерн, один компромисс, одна история сбоя в продакшене. Короткий еженедельный брифинг для тех, кто строит агентные системы.

Одно письмо в неделю, отписка в один клик. Адрес используется только для рассылки брифинга.

Новости

arXiv cs.AI · Опубликовано 12 ноября 2026 г. · 3 мин чтения

Что произошло: Small language models produce grammatically valid but semantically wrong parse trees silently. Using natural language output format instead of symbolic notation cuts silent errors by 2.3x.
Почему это важно: You deploy fine-tuned small parsers for structured tasks like order processing where wrong outputs go undetected downstream without explicit validation.
На что обратить внимание: The study uses one benchmark (pizza ordering). Results may not generalize to other semantic parsing domains or different model architectures and sizes.

Каждый разбирает, как работает техника, когда она оправдывает затраты и где ломается.

Одно письмо в неделю, отписка в один клик. Адрес используется только для рассылки брифинга.