Loading...
Самосогласованность(SC)
Сэмплирует несколько разнообразных цепочек рассуждений при ненулевой температуре, а затем агрегирует их итоговые ответы большинством голосов или голосованием с учётом уверенности. Поскольку к правильному ответу обычно приводят многие различные пути рассуждения, тогда как отдельные ошибки рассеиваются, консенсусный ответ гораздо надёжнее любого единичного жадного декодирования.
In 30 seconds
- What
- Сэмплирует несколько цепочек рассуждений при ненулевой температуре, а затем выбирает итоговый ответ голосованием большинства или взвешиванием по уверенности.
- When to use
- Задачи с проверяемо верным ответом, где существуют разные пути рассуждения, а ошибки рассеиваются между сэмплами.
- Watch out
- Требует в N раз больше затрат на инференс; голосование большинства не работает, если большинство путей сходится к одному и тому же неверному ответу.
Loading technique guide…