Des chercheurs de Caltech, Stanford, de l’Université du Texas et NVIDIA ont développé et publié en collaboration Voyageurun agent de puissance LLM qui utilise GPT-4 s’engager Minecraft.net/ »>Minecraft jouabilité. Voyager démontre des capacités remarquables en apprenant, en conservant des connaissances et en présentant une expertise exceptionnelle dans Minecraft.
Voyageur fonctionne de manière autonome, explorant continuellement le monde virtuel, acquérant diverses compétences et réalisant des découvertes révolutionnaires sans aucune intervention humaine. L’innovation de Voyager réside dans son programme automatique qui optimise l’exploration, une bibliothèque de compétences en constante expansion pour stocker et récupérer des comportements complexes, et un mécanisme d’invite itératif qui intègre les commentaires sur l’environnement, les erreurs d’exécution et l’auto-vérification pour l’amélioration du programme.
Voyager se compose de trois composants clés: un programme automatique pour une exploration ouverte, une bibliothèque de compétences pour des comportements de plus en plus complexes et un mécanisme d’incitation itératif qui utilise le code comme espace d’action.
En utilisant des requêtes boîte noire pour interagir avec GPT-4, Voyager évite le besoin d’affiner les paramètres du modèle. Les compétences développées par Voyager sont à la fois étendues dans le temps et interprétables, ce qui entraîne une croissance composée rapide des capacités de l’agent et atténue les oublis catastrophiques.
Selon Jim Fanl’un des chercheurs du projet, l’expérience GPT-4 dans Minecraft est un bon point de départ pour créer des Agents IA. Les agents autonomes dotés de larges capacités constituent la prochaine étape de l’intelligence artificielle. Ils sont motivés par la curiosité et la survie pour explorer, planifier et acquérir de nouvelles capacités dans des environnements ouverts.
Par rapport aux lignes de base, Voyager déverrouille le niveau en bois 15,3 fois plus rapidement en termes d’itérations d’incitation, le niveau en pierre 8,5 fois plus rapidement, le niveau en fer 6,4 fois plus rapidement, et Voyager est le seul à débloquer le niveau diamant de l’arbre technologique.
Un attribut sans précédent de Voyager est sa capacité à utiliser la bibliothèque de compétences acquises dans un nouveau monde Minecraft pour résoudre de nouvelles tâches à partir de zéro, un exploit que d’autres approches ont du mal à réaliser en généralisant.
Les agents de formation tout au long de la vie sont des modèles d’IA conçus pour acquérir des connaissances et des compétences en continu tout au long de leur durée de vie opérationnelle. Ils possèdent la capacité de s’adapter, d’apprendre et de s’améliorer à mesure qu’ils rencontrent de nouvelles informations et expériences. Les agents de formation tout au long de la vie excellent dans la conservation et le transfert de connaissances, ce qui leur permet de gérer efficacement diverses tâches et domaines. Leur capacité d’apprentissage continu les rend précieux dans divers domaines, notamment les jeux, la robotique, la santé et l’éducation.
Avec Voyager, Minecraft entre dans une nouvelle ère d’innovation, jetant les bases des avancées futures en matière d’agents incarnés d’apprentissage tout au long de la vie.
