L’été a été chargé pour Clubhouse. L’application audio sociale à succès a été déployée nouvelles fonctionnalités de messagerie Et un Application Android au cours des derniers mois et maintenant, la société se concentre sur l’amélioration de son expérience audio de base. Clubhouse a annoncé dimanche que ses salles seront désormais dotées d’un son spatialisé pour donner aux auditeurs de l’application un sentiment plus riche de passer du temps en direct avec un groupe d’autres personnes.
TechCrunch s’est entretenu avec Justin Uberti de Clubhouse au sujet de la décision d’ajouter un son spatial, ce qui a pour effet de faire sonner différents haut-parleurs comme s’ils provenaient de différents emplacements physiques au lieu d’un seul endroit.
Uberti a rejoint Clubhouse en mai en tant que responsable de la technologie de streaming après plus d’une décennie chez Google, où il a créé Google Duo, dirigé l’équipe Hangouts et a récemment travaillé sur la plate-forme de jeux en nuage de Google Stadia. Uberti a également créé la norme WebRTC sur laquelle Clubhouse a été construit.
« L’une des choses que vous réalisez dans ces paramètres audio de groupe est que vous n’obtenez pas tout à fait la même expérience que dans un espace physique », a déclaré Uberti.
Alors que Clubhouse et d’autres applications de chat vocal rassemblent les gens dans des environnements sociaux virtuels, l’audio semble généralement relativement plat, comme s’il émanait d’un seul emplacement central. Mais lors des rassemblements en personne que Clubhouse est censé simuler, vous entendriez le son de tout autour de la pièce, de la gauche et de la droite d’une scène aux différents endroits du public où les orateurs pourraient poser leurs questions.
Pour réaliser les nouvelles astuces audio, Clubhouse intègre un API de High Fidelity, la société d’audio spatial du créateur de Second Life, Philip Rosedale et en le mélangeant avec le traitement audio personnalisé de l’entreprise, adapté à l’application de chat.
La technologie HRTF de High Fidelity, qui signifie « Head Related Transfer Function », mappe la parole vers différents emplacements virtuels en ajoutant subtilement un délai entre les canaux stéréo et en reproduisant la façon dont les hautes et les basses fréquences sonneraient dans l’oreille en fonction de l’origine du son.
Le résultat, utilisé depuis longtemps dans la réalité virtuelle sociale, donne aux expériences sociales virtuelles un sentiment de présence physique que de bons records ont réussi depuis des lustres. Pensez à écouter Pink Floyd La face cachée de la lune en stéréo avec de bons écouteurs, mais au lieu d’effets sonores et d’instruments jouant autour de votre tête, vous entendez les gens avec qui vous traînez disposés dans un espace virtuel.
Selon Uberti, la mise en œuvre de Clubhouse sera subtile, mais perceptible. Alors que le traitement audio « dirigera doucement la conversation » pour placer la plupart des haut-parleurs devant l’auditeur, les utilisateurs du Clubhouse devraient avoir une nouvelle sensation que les gens parlent à partir de différents endroits physiques.
Les nouvelles fonctionnalités audio seront déployées dimanche pour la majorité des utilisateurs iOS, atteignant le reste des utilisateurs iOS et Android de Clubhouse au cours des prochaines semaines. L’expérience sera disponible pour tout le monde à temps, mais les utilisateurs auront également la possibilité de désactiver l’audio spatial.
Clubhouse utilisera les mêmes techniques de scène sonore virtuelle pour donner aux grandes pièces l’impression de sonner grand tout en donnant l’impression que les pièces plus intimes se déroulent dans un espace physique plus petit. Et parce que la plupart des gens utilisent des écouteurs pour participer au Clubhouse, la plupart des utilisateurs de l’application peuvent bénéficier des effets possibles grâce au son stéréo à deux canaux.
« Vous avez cette notion des gens [being] dans un espace, dans une pièce… Nous essayons d’imiter la sensation de ce que ce serait dans un cercle avec des gens debout autour de parler.
Uberti note également que l’audio spatial pourrait donner aux utilisateurs réguliers du Clubhouse un avantage moins évident. Il est possible que l’audio régulier et non spatialisé dans les applications sociales contribue au phénomène de la fatigue de Zoom à l’ère de la pandémie. Comme le cerveau humain traite l’audio virtuel comme un appel téléphonique ou une salle audio de groupe, il différencie les haut-parleurs d’une manière différente de ce qu’il ferait dans un environnement naturel en personne.
« Votre esprit doit déterminer qui parle. Sans repères spatiaux, vous devez utiliser le timbre… cela nécessite plus d’effort cognitif », a déclaré Uberti. « Cela pourrait en fait rendre l’expérience plus agréable en plus d’une plus grande immersion. »
Il est trop tôt pour savoir comment les nombreuses sous-communautés de Clubhouse adopteront les effets audio spatiaux, mais cela pourrait améliorer un peu les expériences comme la comédie, la musique et même l’ASMR sur l’application.
« Quelqu’un raconte une blague et cela semble souvent très plat », a déclaré Uberti. « Mais sur Clubhouse, quand vous sentez le rire venir de tout autour de vous, cela ressemble beaucoup à une expérience de club de comédie. »