Dans le contexte: La réalité augmentée est une technologie intrigante avec un potentiel passionnant. Des entreprises comme Microsoft, Apple et Facebook ont ​​des projets à différents stades de développement. Alors qu’ils continuent à trouver comment rendre la technologie accessible au consommateur moyen, ils doivent comprendre comment nous allons les contrôler.

Facebook travaille sérieusement sur la technologie de réalité augmentée depuis au moins 2019. L’année dernière, il révélé il dispose d’une «plate-forme de recherche» en RA qui fonctionne et qui s’appelle «Projet Aria». Le dernier fruit de ce travail est un contrôleur de bracelet conceptuel qui lit les signaux nerveux des utilisateurs.

L’objectif de Facebook Reality Labs est de développer une interface homme-machine (HCI) «facile à utiliser, fiable et privée». La dernière chose que les utilisateurs veulent lorsqu’ils utilisent des lunettes AR et interagissent avec le monde réel est de transporter un gros appareil pour manipuler des éléments virtuels. Les utilisateurs voudront quelque chose de subtil, comme des gestes légers ou des impulsions idéalement invisibles, pour interagir avec leurs réalités augmentées. FRL travaille sur le premier avec l’objectif du second.

« Notre étoile du nord [is] pour développer une technologie d’entrée omniprésente – quelque chose que n’importe qui pourrait utiliser dans toutes sortes de situations rencontrées tout au long de la journée. « 

Ses bracelets « prototype de recherche » utilisent électromyographie (EMG) pour intercepter les impulsions nerveuses envoyées par le cerveau aux mains. L’intelligence artificielle embarquée interprète alors les signaux en «commandes numériques». On peut y penser comme une autre forme de contrôle gestuel; seulement dans ce cas, les capteurs suivent les signaux nerveux invisibles plutôt que les mouvements visibles des doigts ou des mains.

Le prototype de recherche de Facebook facilement lit les signaux électriques tout en effectuant des mouvements plus discrets que ceux requis par le suivi gestuel traditionnel. Il espère en outre que les progrès conduiront à des capteurs qui interprètent les impulsions si rapidement que l’action est effectuée avant ou sans que l’utilisateur n’effectue le geste.

« Les signaux à travers le poignet sont si clairs que l’EMG peut comprendre le mouvement du doigt d’un millimètre seulement », a déclaré FRL. « Cela signifie que l’entrée peut se faire sans effort. En fin de compte, il peut même être possible de ressentir simplement l’intention de bouger un doigt. »

En fin de compte, les contrôleurs EMG pourraient améliorer les temps de réaction et effectuer des actions sans passer physiquement par les mouvements. Imaginez à quel point vous pourriez taper plus vite si vous n’aviez qu’à penser à bouger vos doigts sans avoir à le faire. Ajoutez à cela une IA qui s’adapte à votre style de frappe et corrige vos fautes de frappe à la volée.

« Le résultat est un clavier qui se transforme lentement en vous, plutôt que vous et tout le monde apprenez le même clavier physique. Ce sera plus rapide que n’importe quelle interface de saisie mécanique, et il sera toujours disponible parce que vous êtes le clavier. »

Le concept de Facebook n’est pas la première fois que nous voyons l’électromyographie utilisée pour contrôler un appareil. Les fabricants de prothèses travaillent sur l’EMG et les interfaces neuronales depuis un certain temps. Il sera intéressant de voir la technologie développée pour le marché de la consommation en général.