Loading...
🧬
Автоматическая оптимизация промптов(APO)
Рассматривает промпты и инструкции внутри конвейера агента как обучаемые параметры, которые оптимизируются программно по метрике и размеченному набору данных, а не настраиваются вручную. Оптимизаторы автоматически подбирают few-shot-примеры и перебирают формулировки инструкций, а рефлексивные методы изменяют промпты, анализируя трассы выполнения прошлых сбоев.
Сложность: highОбучение и адаптация
In 30 seconds
- What
- Рассматривает промпты как обучаемые параметры, которые оптимизируются по метрикам с помощью few-shot-бутстрэппинга, поиска инструкций, анализа трасс отказов и циклов обратной связи от LLM вместо ручной подстройки.
- When to use
- У вас есть размеченные валидационные данные, чёткая метрика и достаточный бюджет вычислений, чтобы прогнать много итераций пайплайна и системно улучшить качество промптов.
- Watch out
- Оптимизация может переобучиться на вашем валидационном наборе или метрике и выдать промпты, которые не работают в новых доменах или подыгрывают метрике вместо настоящего роста возможностей.
Loading technique guide…