Loading...
Skill-Bibliothek (Voyager)(SL)
Ein Agent schreibt wiederverwendbare, ausführbare Skills (Programme) für die Verhaltensweisen, die er entdeckt, speichert sie in einer Bibliothek, die über Embeddings ihrer Beschreibungen indexiert ist, und ruft sie später ab, um sie zu komplexeren Skills zusammenzusetzen. Die Bibliothek wächst als eine Form prozeduralen Gedächtnisses, sodass sich Fähigkeiten im Laufe der Zeit ohne Gradientenaktualisierungen oder katastrophales Vergessen aufsummieren.
In 30 seconds
- What
- Der Agent schreibt ausführbaren Code für entdeckte Verhaltensweisen, legt ihn in einer per Embedding indizierten Bibliothek ab und setzt daraus komplexe Fähigkeiten zusammen, die ohne erneutes Training wachsen.
- When to use
- Offenes Lernen, bei dem der Agent im Lauf der Zeit viele wiederverwendbare Verhaltensweisen entdeckt und auf früheren Entdeckungen aufbauen muss, ohne sie zu vergessen oder neu zu trainieren.
- Watch out
- Codequalität und Korrektheit verschlechtern sich schnell, wenn das Ausführungsfeedback verrauscht ist oder die Verfeinerungsschleife Fehler nicht abfängt, bevor der Code in der Bibliothek landet.
Loading technique guide…