Il a été difficile d’ignorer les conversations qui ont entouré le développement des outils d’IA ces derniers temps. Avec Midjourney utilisant des invites pour générer des images et ChatGPT d’OpenAI capable de générer un texte apparemment complet, on a l’impression d’être au bord d’une révolution technologique passionnante mais terrifiante.

Cela n’a pas seulement eu un impact sur écoles, concours artistiqueset éditeurs– après la sortie de la tentative de Corridor Digital d’un anime généré par l’IA, les animateurs à l’intérieur et à l’extérieur du Japon se sont demandé s’il s’agissait d’une solution réaliste aux problèmes de surproduction de l’industrie.

Et généralement, leur conclusion a été : Non, ce n’est pas le cas.

Divulgation complète : Je trouve l’IA amusante. J’ai joué avec ChatGPT pour qu’il écrive une fanfiction stupide comme « écris une courte histoire sur un Pokémon entraîneur qui bat l’Elite 4 avec un Weedle. J’ai également envoyé des invites à MidJourney avec « Joker de Persona 5 combat des robots avec Spongebob Squarepants dans une Venise de science-fiction.

Cependant, j’ai constaté que vous obtenez rarement ce que vous recherchez, même lorsque vous affinez vos invites pour obtenir un résultat plus spécifique. Au lieu de cela, vous prenez la meilleure estimation de l’intelligence et vous lui faites fournir itération après itération jusqu’à ce que vous trouviez quelque chose qui est juste « bien ». C’est particulièrement grave lorsqu’il s’agit de MidJourney – quelles que soient les données dont il se nourrit sur le Web, il produira toujours quelque chose de moins que la somme de ses parties. S’il produit du grand art, c’est parce que de grands artistes quelque part ont produit quelque chose de similaire.

Et ce même sentiment vaut pour le court métrage « ANIME ROCK, PAPER, SCISSORS » de Corridor Digital, une animation de sept minutes basée sur des images en direct, utilisant un modèle de diffusion stable formé sur des captures d’écran de Maison de fousc’est Vampire Hunter D: Soif de sang film. Même si vous mettez de côté la grossièreté d’avoir regardé quelque chose qui plagie de manière transparente des dizaines de travaux d’artistes utilisés à des fins lucratives, le résultat n’est pas un anime convaincant en premier lieu – et c’est parce qu’une IA ne comprend que ce que produisent les animateurs, pas pourquoi ils l’ont produit.

Alors que Niko Pueringer de Corridor parle longuement de la «démocratisation» de l’animation dans sa vidéo «Did We Just Change Animation», il passe très peu de temps à se familiariser avec le processus réel qu’il essaie d’imiter. Au lieu de cela, le Youtube les créateurs ont tourné des images devant un écran vert d’eux-mêmes en costumes exécutant les actions, exagérant considérablement chaque geste pour correspondre à leur idée de ce qu’est l’anime. Ensuite, lorsqu’ils ont demandé à l’IA de transformer ces images en équivalents inspirés de l’anime, ils ont décidé de n’inclure qu’une image sur deux dans leur vidéo finale.

C’était une tentative de capturer le timing de l’anime, mais il a manqué le problème fondamental que la fréquence des images dans l’anime est en constante évolution, même dans les mêmes plans. C’est pourquoi les animateurs ne parlent pas d’anime en termes de « images par seconde » – le nombre d’images peut changer à tout moment, et parfois, les personnages seront animés à une fréquence différente même s’ils existent dans la même scène. Cela peut sembler mineur, mais ces incohérences, lancées par le regretté Yasuo Otsukasont au cœur de l’emblématique de l’anime animation limitée style. Et, malheureusement pour toute IA tentant de les copier, les animateurs les traitent comme largement intuitifs.

En fait, l’anime 3D a lutté avec cela pendant plus d’une décennie. Les tentatives semblent étranges si elles sont rendues à 24 images par seconde, mais saccadées si elles sont rendues à 12 ips ou 8 ips constants. L’une des principales raisons Studio OrangeLes travaux de sont loués même parmi les sceptiques de la 3D parce qu’ils ont réussi à correspondre au timing de l’anime 2D après avoir travaillé dessus pendant des décennies. La réalité est que peu importe à quel point votre processus devient numérique, l’attrait de l’anime réside dans l’incohérence et l’intuition humaines.

Ce manque d’incohérence est également un problème majeur dans le travail de Corridor. Si vous dites à un robot de toujours dessiner un personnage exactement de la même manière, il le fera. Mais le plaisir de donner aux animateurs humains une feuille de conception de personnage est que vous savez qu’ils interpréteront chacun les choses légèrement différemment. Alors que Corridor a du mal à faire en sorte que son modèle reste fidèle à un style spécifique, celui de Vampire Hunter D: Soif de sang– la vérité est que le film n’a jamais eu qu’un seul regard. Selon le directeur de l’animation, l’animateur ou même la distance entre le personnage et la caméra, leurs visages changent subtilement tout au long du film. Ce n’est pas une erreur. C’est un appel du médium.

Les seules incohérences que le modèle de Corridor peut produire sont les nombreux problèmes sur les visages des personnages. Il n’est pas capable de comprendre ça Vampire Hunter D: Soif de sang était un film créé par des dizaines d’artistes différents avec de nombreuses inspirations et façons différentes de créer de l’art. Il n’est pas en mesure de comprendre que les personnages d’anime ne sont pas censés être exactement les mêmes tout le temps.

En fin de compte, « Anime Rock, Paper, Scissors » est un court métrage scintillant et rotoscopé. Il existe un moyen de résoudre ses plus gros problèmes, mais ce serait littéralement un cas d’embauche d’animateurs pour l’examiner et faire des ajustements. Et à ce moment-là, pourquoi ne pas simplement les embaucher pour commencer ?

Même si la génération de l’IA devient plus intelligente pour comprendre nos invites et apprendre comment l’art est créé, il est très loin de comprendre pourquoi un artiste prend les décisions qu’il prend. Actuellement, les meilleures parties du court métrage de Corridor Digital sont les parties qu’ils ont réellement faites eux-mêmes – les effets visuels, l’éclairage, la prémisse, etc. Le reste est une tentative maladroite de capturer un style que ni l’IA ni Corridor eux-mêmes ne comprennent réellement.

En fait, dans une vidéo publiée sur la chaîne de Corridor, les animateurs Tom et Tony Bancroft avait des éloges pour le film mais a noté que beaucoup de parties vraiment impressionnantes étaient les décisions créatives prises par les artistes humains. Des gens ordinaires sans le même type d’expérience ou d’outils, disaient-ils, ne pourraient pas produire un résultat similaire.

Il est difficile de savoir si l’IA aura vraiment sa place dans la production d’anime. Bien sûr, la technologie d’apprentissage automatique et d’autres formes de génération d’ordinateurs auront toujours une place dans les composants numériques de l’anime, mais ceux-ci sont précieux car les créateurs d’anime sont toujours conscients des données exactes qu’ils utilisent. Par exemple, production de david était particulièrement enthousiasmé par l’automatisation entre-deux outil CACANI pendant un certain temps, bien que même alors, cela exigeait encore une touche humaine.

L’un des plus gros problèmes qui semblent se poser à la fois dans l’apprentissage automatique et dans la génération d’IA est la nécessité pour les humains de réparer le travail d’un ordinateur. Quand Netflix a expérimenté la génération d’IA pour développer des arrière-plans dans leur court métrage d’anime « Dog and Boy » avec Avec Studio, leur modèle s’était notamment trompé sur des détails clés, incitant l’artiste de fond à repeindre l’intégralité de l’image. On ne sait pas dans quelle mesure l’intelligence artificielle peut aider et dans quelle mesure elle peut entraver.

À l’heure actuelle, « anime » est l’une des invites les plus populaires sur Midjourney, mais il se nourrit de tant de données créées par des fans qu’il n’est pas du tout rare de trouver des filigranes déformés dans les coins des images générées. En même temps, « anime » n’est pas un style, pour commencer – chaque fois que vous demandez à une IA de créer quelque chose dans un style anime, elle trouve soit un fan artiste, soit un créateur de personnages professionnel à essayer de copier. Il est incapable de créer quoi que ce soit de nouveau.

Même si l’IA trouve une place dans d’autres industries, je ne peux la voir jouer un rôle majeur dans la production d’anime que si elle gagne en sensibilité, va à l’école d’art et étudie l’anime comme un processus et pas seulement comme un résultat.