Loading...
📚
Библиотека навыков (Voyager)(SL)
Агент пишет переиспользуемые, исполняемые навыки (программы) для обнаруженных им моделей поведения, сохраняет их в библиотеке, индексированной по эмбеддингам их описаний, а затем извлекает и компонует их в более сложные навыки. Библиотека растёт как форма процедурной памяти, поэтому возможности накапливаются со временем без обновления градиентов и катастрофического забывания.
Сложность: highОбучение и адаптация
In 30 seconds
- What
- Агент пишет исполняемый код для найденных вариантов поведения, складывает его в библиотеку с индексацией по эмбеддингам и собирает из него сложные навыки, которые растут без переобучения.
- When to use
- Открытое обучение, когда агент со временем находит множество переиспользуемых способов действия и должен опираться на прежние находки, не забывая их и не переобучаясь.
- Watch out
- Качество и корректность кода быстро падают, если обратная связь от выполнения зашумлена или цикл доработки не отлавливает ошибки до записи в библиотеку.
Loading technique guide…