Théoriquement, contrôler un drone volant est un peu comme piloter un hélicoptère sauf que lorsqu’il s’agit de drones, il n’y a pas d’humain dans le cockpit ce qui rend difficile la visualisation de la position du drone par rapport aux différents obstacles environnementaux. Votre vision du drone volant sera bidimensionnelle et dépendra des joysticks et des caméras.
La semaine dernière, les chercheurs Shaojie Shen et Chuhao Lio de l’Université des sciences et technologies de Hong Kong a dévoilé une nouvelle innovation intrigante qui utilise du matériel de réalité augmentée holographique pour générer des cartes de terrain 3D en direct et permet aux pilotes de drones de pointer simplement des cibles qui ont été visualisées au-dessus de toute surface plane.
L’interface holographique utilise une combinaison de technologies pour le rendre. Pour l’affichage, le casque Microsoft HoloLens génère le contenu AR sous la forme d’une carte voxel colorée que vous pouvez visualiser sous n’importe quel angle. Il le relaie via les caméras de profondeur d’un drone autonome ainsi que la diffusion de rayons pour les données de localisation en temps réel. Le système fournit à l’opérateur une impression en direct et très spatiale de l’élévation environnementale ainsi que de la profondeur et permet au drone d’être facilement vu du point de vue d’une troisième personne et d’être repositionné.
Le casque HoloLens renvoie ensuite les commandes au drone et détermine sa prochaine cible à l’intérieur de la carte holographique en transformant les gestes de la main et les regards du porteur en commandes pointer-et-cliquer. Le drone autonome peut ensuite voler vers le nouvel emplacement tout en mettant à jour la carte 3D à mesure qu’il se déplace.
Les chercheurs ont également publié une vidéo de démonstration qui ressemble à quelque chose tout droit sorti d’un film de science-fiction, en particulier du côté holographique des choses. Cependant, en raison des limites de la bande passante, le drone ne fournira que des données cartographiques 3D à l’interface de réalité augmentée et ne relèvera pas la vidéo à la première personne qui l’accompagne.
L’équipe de chercheurs a encore du chemin à parcourir avant de pouvoir déployer le système de contrôle de drone holographique. Les données du drone ont été initialement partagées en utilisant le Wi-Fi dans un espace de test intérieur, mais pour les applications extérieures, il serait possible d’utiliser des connexions cellulaires 5G à faible latence une fois que les réseaux 5G ont avancé au-delà de leur phase actuelle limitée par les drones. Les chercheurs ont noté qu’il y avait des plaintes fréquentes en raison du «champ de vision (AR) très limité» avec le premier groupe de testeurs. C’est un problème que le prochain casque HoloLens 2 AR pourrait résoudre. Le premier groupe de testeurs a également été obligé de s’entraîner afin d’être plus compétent en ciblage 3D malgré une méconnaissance antérieure du matériel de réalité augmentée, un scénario qui pourrait déboucher sur une interface utilisateur 3D imparfaite ou une reconnaissance gestuelle.
Les données cartographiques 3D auront cependant une meilleure efficacité de bande passante qu’une vidéo en direct. Il n’aura besoin que de 272 Mo de données lorsqu’il est mis à jour 10 fois par seconde. Une vidéo en direct nécessite 1,39 Go de données pour transmettre une image vidéo à la première personne à 30 images par seconde. À l’avenir, l’équipe vise également à incorporer les deux types de flux au profit des utilisateurs finaux, en aidant à optimiser les données pour satisfaire les niveaux de bande passante minimum du réseau.
Malgré ces problèmes de démarrage, le système de réalité augmentée holographique montre beaucoup de potentiel. Outre sa nouvelle interface visuelle, il vous offre beaucoup de commodité pour contrôler un drone à distance en utilisant simplement un casque de réalité augmentée autonome simple et portable au lieu d’avoir à compter sur l’ordinateur, le moniteur et le joystick conventionnels et à part entière.
Les chercheurs envisagent de présenter cette «première étape» de la fusion de la RA avec des drones autonomes au Conférence internationale sur les robots et systèmes intelligents qui aura lieu du 25 au 29 octobre 2020.
http://virtualrealitytimes.com/2020/08/09/researchers-unveil-holographic-ar-control-system-for-drones/http://virtualrealitytimes.com/wp-content/uploads/2020/08/AR-Autonomous-Drive-600×336.pnghttp://virtualrealitytimes.com/wp-content/uploads/2020/08/AR-Autonomous-Drive-150×90.pngLes inventionsLa technologieThéoriquement, contrôler un drone volant est un peu comme piloter un hélicoptère sauf que lorsqu’il s’agit de drones, il n’y a pas d’humain dans le cockpit, ce qui rend difficile la visualisation de la position du drone par rapport aux différents obstacles environnementaux. Votre vision du drone volant …Sam OchanjiSam
Ochanjisochanji@yahoo.comAdministrateurTemps de réalité virtuelle
