Une maison d'animation chinoise met les capacités de l'IA à l'épreuve

Apr 29, 2024

Inscrivez-vous à la newsletter quotidienne Marketplace pour comprendre les actualités commerciales et économiques les plus importantes.

Chris Bremble, fondateur d'une société d'effets visuels et d'animation basée à Pékin appelée Base Media et lauréat d'un Emmy Award, se souvient de la première fois qu'il a entendu parler de l'intelligence artificielle générative.

C'était lors d'une conférence de l'industrie en 2018. Il a assisté à une démonstration d'un logiciel capable de reproduire la fumée d'une photographie en cinq secondes.

"J'ai eu une petite crise de panique", a déclaré Bremble. "Voir cette chose m'a fait dire : 'Ouais, ça arrive.' Nous ne pouvons pas éviter cela.

Cinq ans plus tard, l’IA générative n’a pas encore été largement adoptée par le secteur de la post-production cinématographique, mais de nombreux acteurs et écrivains à Hollywood sont déjà inquiets de son impact sur leur art et leur travail. C'est en partie pour cela qu'ils sont en grève.

En Chine, où Bremble possède des bureaux dans quelques villes, des licenciements ont déjà été signalés dans l’industrie du jeu vidéo en raison de l’IA générative. Bremble souhaite garder une longueur d'avance en matière de technologie.

Base Media a travaillé sur des superproductions hollywoodiennes telles que « Black Panther : Wakanda Forever » ; la série limitée « Star Wars » « Obi-Wan Kenobi » ; et des films chinois comme « The Wandering Earth ». Plus tôt cette année, la société a été chargée par le géant chinois du streaming iQiyi d’étudier le potentiel de l’IA générative. Plus précisément, Wonderworks, la division enfants et animation d'iQiyi, souhaitait tester dans quelle mesure l'IA générait des lieux 3D, qui constituent la partie la plus coûteuse et la plus exigeante en main-d'œuvre de la production d'animation.

« Par exemple, si c'est « Aladdin », [vous] avez un château ici, un coin de ville, et vous voulez que le personnage le traverse en courant, et vous voulez une vue plongeante du personnage qui serpente dans la ruelle. Ensuite, vous devez [virtuellement] construire le tout », a déclaré Wang Huiyu, directeur de Wonderworks. « Chaque vitrine et chaque vitrine doivent être construites. »

Elle a déclaré que 30 % de sa production d’animation était généralement consacrée à la création de lieux.

Pour tester les capacités de l'IA, Wang a donné à Base Media un scénario de 90 secondes sur une fille à la recherche de ses amis et une série d'animation iQiyi qu'elle vient de terminer intitulée « The Roofus ». Les 260 minutes de la série d'animation ont été introduites dans la machine IA pour qu'elle reproduise l'apparence et le style de l'animation que Wang souhaitait dans le produit final.

Le superviseur des effets visuels de Base Media, Igor Lodeiro, du bureau de Xiamen, a dirigé le projet. Il a remporté un Daytime Emmy et a travaillé sur de nombreux films nominés aux Oscars. Lodeiro a déclaré qu'il avait initialement peu d'attentes à l'égard des outils d'IA.

Son équipe a réalisé un premier montage. Ils ont animé le personnage principal à la main et mis des blocs gris en arrière-plan et partout ailleurs. L'équipe saisit des photos et des mots-clés pour inciter l'IA.

"[C'était] assez bizarre au début", a déclaré Lodeiro. « Il y avait quelques anomalies et distorsions, mais vous regardez les images [initiales] [de la vidéo de test]… on aurait dit qu'elles pourraient appartenir à l'émission [iQiyi « The Roofus »]. J'ai été surpris."

Dans la vidéo finale, le personnage animé fait du skateboard sur un pont en bois à Pékin, traverse des toits chinois incurvés et s'accroche à une gargouille surplombant la ville tentaculaire de Paris.

L'IA a généré chaque endroit traversé par le personnage ; le mouvement du skateboard a également été créé par l’IA. Les outils d’IA ne sont pas parfaits et certains ajustements ont été effectués à la main. La vidéo finale a duré trois semaines. Il en aurait fallu plus de huit avec une équipe d'animation humaine.

En tant que spectateur, il est difficile de discerner ce qui a été fait par l’IA et ce qui ne l’a pas été.

"C'est la meilleure chose que nous puissions entendre", a déclaré Bremble. « Le public ne devrait pas regarder une émission et se dire : « Oh, c'est généré par l'IA ». »

Il souhaite voir comment l'IA peut aider ses meilleurs talents à en faire plus en une journée et ainsi rendre la planification de la production plus prévisible.

Bien que Lodeiro puisse voir que les parties les plus fastidieuses de la production d’animation – comme le storyboard – pourraient être entièrement réalisées par l’IA, il pense qu’à terme, le public pourrait obtenir des animations de meilleure qualité.