En bref: L'assistance à diverses tâches est l'une des principales fonctions proposées par les IA génératives d'entreprises comme Microsoft, OpenAI, google et peut-être bientôt apple. Lors d'un récent dévoilement des « PC IA », Microsoft a affirmé que son IA, Copilot, pouvait aider les joueurs dans certains jeux vidéo en temps réel, mais son efficacité dans des scénarios réels reste à voir.

Alors que révélateur cette semaine, sur ses nouveaux ordinateurs portables Surface alimentés par l'IA, Microsoft a partagé une démonstration dans laquelle l'IA intégrée Copilot de l'appareil offrait des conseils en temps réel dans des jeux comme Minecraft et Sea of ​​​​Thieves. L'assistant numérique entièrement vocal semblait mener une conversation naturelle et réagir aux événements du jeu.

Dans une vidéo, un joueur de Minecraft demande à Copilot comment fabriquer une épée. L'IA peut voir quels objets se trouvent dans l'inventaire du joueur et suggère qu'il doit encore collecter du bois ou de la pierre. Une autre vidéo montre des zombies attaquant le joueur. Copilot passe rapidement à un ton alarmé et conseille au joueur de trouver un abri ou de construire une barrière pour rester hors de sa portée.

Conversations en temps réel avec votre compagnon IA Copilot, optimisé par le GPT-4o d'OpenAI. pic.twitter.com/Ug7EWv2sah

– Microsoft Copilot (@MSFTCopilot) 20 mai 2024

On ne sait pas quels jeux Copilot prendront en charge, mais une capture d'écran de Windows Central suggère cela peut également aider avec Sea of ​​Thieves. Si l’IA doit être adaptée à chaque jeu, elle pourrait faire ses débuts pour des titres spécifiques publiés par Microsoft.

En mettant l'accent sur la confidentialité, Microsoft a déclaré que toutes les informations recueillies par Copilot pour l'assistance dans le jeu resteraient sur l'appareil. L'entreprise ne téléchargera pas de données sur le cloud et ne les utilisera pas pour former des modèles d'IA.

Les guides en temps réel sont quelque peu différents des autres applications de jeux vidéo basées sur l'IA. Les utilisations les plus réussies de cette technologie dans le domaine des jeux ont été la mise à l’échelle et la génération de trames assistées par apprentissage automatique – des fonctionnalités qui améliorent considérablement les performances. Pendant ce temps, Nvidia a proposé remplir les jeux avec des personnages contrôlés par l'IA qui peuvent réagir à un large éventail d'entrées des joueurs.

À l’inverse, l’assistance en jeu serait vraisemblablement facultative et n’affecterait pas directement le contenu d’un jeu. Cependant, certains pourraient exprimer des inquiétudes quant à l'impact de cette fonctionnalité sur les guides manuscrits.

L'hallucination est un autre risque à considérer. Jusqu’à présent, les développeurs n’ont pas réussi à empêcher les chatbots basés sur l’IA de déclarer de fausses informations en toute confiance. Les résumés d'IA récemment dévoilés pour la recherche Google ont immédiatement été surpris, il y a donc de fortes chances que la même chose puisse arriver à l'assistant de jeu de Copilot.

Le PC Surface Pro Copilot+ de Microsoft sera disponible à la mi-juin, à partir de 999,99 $. Le PC utilise le processeur Snapdragon X Elite de Qualcomm pour exécuter une version de Windows basée sur Arm. Le Hexagon NPU exécute des charges de travail d’IA sur 45 TOP.