Загружаем паттерны…
Простая оптимизация предпочтений(SimPO)
Оптимизация предпочтений без опорной модели, использующая нормированную по длине логарифмическую вероятность последовательности как неявную награду с заданным целевым запасом награды
За 30 секунд
- Что это
- Обучает модель предпочитать выбранные ответы отклонённым, сравнивая нормированные по длине логарифмические вероятности, без отдельной эталонной модели.
- Когда применять
- У вас есть парные данные предпочтений (выбранные и отклонённые ответы), и вы хотите оптимизировать поведение модели без вычислительных затрат на поддержание эталонной модели.
- Осторожно
- Нормировка по длине может маскировать различия в качестве, когда выбранные и отклонённые ответы существенно различаются по длине, ухудшая сигнал предпочтения.
Спросите ИИ-эксперта об этом паттерне
Откроет ассистента с готовым вопросом. Вы проверите его перед отправкой.
Простая оптимизация предпочтений: Обзор
Оптимизация предпочтений без опорной модели, использующая нормированную по длине логарифмическую вероятность последовательности как неявную награду с заданным целевым запасом награды
- Reference-model-free training
- Length-normalized implicit reward
- Target reward margin
- Pairwise preference objective
- Sequence-level likelihood comparison
- Length and quality monitoring
The Agent Architect
Один паттерн, один компромисс, одна история сбоя в продакшене. Короткий еженедельный брифинг для тех, кто строит агентные системы.
Одно письмо в неделю, отписка в один клик. Адрес используется только для рассылки брифинга.
Источники
Статьи, спецификации и репозитории, на которых основан этот паттерн.
От инженера, создавшего этот каталог
Проведите ревью архитектуры ваших агентов
На этой странице описан один паттерн. Ваша система использует десятки, и большинство сбоев возникает на стыках. Мы разберём весь дизайн по 288 паттернам каталога: архитектура, надёжность, оценка и стоимость, каждая находка связана с паттерном, который её устраняет.
€750 вместо €1 500, одна неделя, письменный отчёт и разбор в звонке, до 30 сентября