Howie Mandel entre dans le métaverse. DeepBrain AI a créé une version AI assez réaliste du comédien et acteur Mandel.

IA Deepbrain, basé en Corée du Sud et à Palo Alto, en Californie, appelle sa création « AI Howie », et c’est un jumeau virtuel humain et numérique interactif pour des expériences immersives et personnalisées pour les fans. AI Howie mentionne VentureBeat et me parle dans les vidéos ci-jointes.

Contrairement aux « deepfakes » de Tom Cruise et d’autres acteurs, le vrai Howie Mandel a coopéré avec DeepBrain AI pour créer la réplique humaine virtuelle de l’IA du célèbre comédien, acteur, animateur et passionné de technologie. Nous avons utilisé le personnage d’IA « Paris virtuel » lors de notre récent événement MetaBeat à San Francisco.

« Je suis tout aussi ravi, excité et terrifié d’avoir enfin la possibilité de me présenter et de faire des choses sans aller nulle part ni rien faire », a déclaré Mandel, dans un communiqué. « Merci, DeepBrain. »

DeepBrain AI applique une technologie d’apprentissage en profondeur pour créer des humains virtuels hyperréalistes via ses studios d’IA et les plates-formes AI Human. Ces humains virtuels sont des jumeaux numériques de la personne réelle, avec la même apparence, la même voix, les mêmes gestes et les mêmes manières subtiles. La plate-forme AI Studios permet un logiciel de script à vidéo qui synthétise le contenu vidéo dynamique en quelques secondes, produisant le plus rapide et le plus vidéos réalistes générées par l’IA. L’éditeur de script en vidéo permet aux clients de sélectionner facilement un modèle, puis de lui faire dire quelque chose basé sur un script. En une minute environ, la vidéo est faite.

Il s’agit d’un puissant outil de communication et de marketing pour les célébrités, les athlètes professionnels, les présentateurs de nouvelles et même les politiciens. Avant de travailler avec Howie Mandel, l’équipe DeepBrain AI a créé des jumeaux numériques de la superstar du football de Premier League Son Heung-Min, de plusieurs présentateurs de nouvelles à travers l’Asie et du président sud-coréen Yoon Suk-yeol.

Joe Murphy, responsable du développement commercial pour DeepBrain AI, a déclaré dans une interview avec VentureBeat que le Howie virtuel est un modèle conversationnel que vous parsemez de questions. DeepBrain AI conçoit et développe ces humains virtuels dans le but de créer des jumeaux numériques (comme Howie Mandel), des personnes numériques et des avatars.

« Nous créons des modèles de personnes réelles », a déclaré Murphy. « Nous avons aussi des humains virtuels complètement synthétiques. C’est ce que nous appellerons les personnes numériques. Et puis les avatars ne sont que le type d’avatars de base de Roblox. Mais là où notre technologie entre en jeu avec les jumeaux numériques, c’est que nous passons par un processus d’apprentissage en profondeur pour cloner la voix de la personne, ses manières, son visage, la façon dont ses yeux bougent, la façon dont ses lèvres bougent.

Il a ajouté: «Nous créons donc ce que nous appelons le jumeau numérique de la personne réelle avec toute la singularité de cette personne. Notre mission est d’utiliser cette technologie que nous avons développée dans toute l’Asie et de l’apporter en Amérique.

En plus des capacités de script en vidéo, la société propose des expériences entièrement conversationnelles avec son logiciel AI Human. La solution AI Human permet aux fans d’interagir et de s’engager avec AI Howie en posant simplement des questions. Par exemple, lorsqu’on lui a demandé : « Quel a été votre acte préféré sur AGT cette saison ? » le modèle AI Howie répond en temps réel pour prendre en charge des expériences de fans interactives, amusantes et engageantes.

Les humains IA sont disponibles dans les applications mobiles, les navigateurs Web ou les kiosques à commande vocale.

« Notre vision est d’humaniser les expériences numériques et de donner aux équipes créatives les moyens de générer du contenu immersif à grande échelle », a déclaré Eric Jang, PDG de DeepBrain AI. « Travailler avec Howie Mandel a été une expérience amusante, et nous sommes ravis de voir comment la collaboration AI Howie se connectera avec ses fans du monde entier. »

DeepBrain AI, (anciennement Moneybrain), une startup d’IA conversationnelle basée à Séoul, en Corée du Sud, a levé 44 millions de dollars dans le cadre d’une série B dirigée par la Korea Development Bank pour une valorisation post-money de 180 millions de dollars. La société a démarré en 2016 et a levé 54 millions de dollars à ce jour. L’entreprise compte 130 employés.

L’IA est utilisée pour les présentateurs de nouvelles AI en Corée du Sud et en Chine sur quatre réseaux de télévision différents. Les réseaux signalent que l’ancre est un avatar IA afin que personne ne soit confus.

Alors que plusieurs entreprises travaillent sur des humains virtuels, les avatars de DeepBrain AI sont hyperréalistes. L’une des plus grandes compagnies d’assurance d’Asie l’utilise également, tout comme un « ambassadeur de la marque » d’une équipe de football.

« Lorsque nous avons travaillé avec Howie Mandel, nous sommes allés dans son studio à Los Angeles, nous avons fourni un script et introduit nos données de formation dans notre réseau de neurones », a déclaré Murphy.

Il a fallu environ une journée pour faire un tournage vidéo avec Mandel et environ trois à quatre semaines de temps d’apprentissage automatique sur les ordinateurs pour générer le premier modèle d’IA.

En janvier, DeepBrain AI a ouvert son bureau à Palo Alto, en Californie, et discute avec des partenaires de la Silicon Valley et du reste des États-Unis. Au fil du temps, Murphy a déclaré que l’espoir était de créer des avatars d’IA en 3D réaliste pour le métaverse. En Corée du Sud, des kiosques apparaissent dans des endroits comme les banques avec des avatars 2D et des avatars 3D.

Au fil du temps, Murphy a déclaré que les avatars se sont améliorés dans les manières, la synchronisation labiale et les gestes subtils. La vitesse des réponses en temps réel dans les conversations est également devenue plus rapide. La société parle de faire plus avec les sociétés de jeux et les grandes marques.