Revolution dans le cinéma: Act-1 vous permet de manipuler des personnages IA

Act-1 de Runway révolutionne le cinéma en vous permettant de contrôler des personnages IA

La nouvelle révolution de la vidéo IA

L’un des leaders des plateformes vidéo d’intelligence artificielle, Runway, vient d’annoncer une innovation majeure. Celle-ci promet de bouleverser notre façon de concevoir la cohérence des personnages et la réalisation de films en général.

Act-1 : la marionnettisation moderne

Intitulée Act-1, cette nouvelle fonctionnalité introduit une approche inédite dans le domaine des générateurs vidéo IA. C’est une sorte de « marionnettisation » moderne qui permet de filmer une personne en train d’interpréter un rôle, puis d’utiliser l’IA pour modifier radicalement son apparence. Cette avancée résout l’un des plus grands défis de l’IA : la constance.

La disponibilité d’Act-1 sera progressivement étendue au cours des prochaines semaines, et Runway assure qu’elle sera bientôt accessible à tous.

Un pont entre l’humain et l’IA

Les outils vidéo IA ont considérablement amélioré la capture des mouvements humains, la synchronisation labiale et le développement des personnages. Cependant, il reste un fossé à combler avant de pouvoir éliminer l’effet « manifestement IA ». Mais avec son nouvel outil, Runway semble avoir trouvé la solution.

Plutôt que de laisser l’IA déterminer comment le personnage doit bouger ou réagir, Act-1 permet de télécharger une vidéo accompagnée d’une image de contrôle pour définir le style. Elle superpose ensuite l’image de contrôle sur la performance filmée.

Un avenir prometteur pour la vidéo IA

Pour moi, l’avenir de la vidéo IA réside dans la fusion entre l’IA générative et la réalité, plutôt que de se reposer entièrement sur l’IA. Les meilleurs films ont déjà recours à des effets visuels en combinaison avec des prises de vue réelles, et l’intelligence artificielle n’est qu’une extension de cette pratique.

Act-1 de Runway place la performance humaine au premier plan, en utilisant l’IA comme un filtre. L’humain devient ainsi le marionnettiste, à l’image d’Andy Serkis dans son interprétation de Gollum dans « Le Seigneur des Anneaux » – sans avoir besoin de combinaisons de capture de mouvement ou de caméras coûteuses.

Je n’ai pas encore eu l’occasion de l’essayer, mais à en juger par certains exemples partagés par Runway, il suffit de s’asseoir devant une caméra et de bouger la tête. Un élément de cette technologie est déjà disponible depuis un certain temps, notamment chez Adobe, mais sans l’élément IA génératif.

Cependant, Act-1 va beaucoup plus loin que tout ce que nous avons vu jusqu’à présent. Selon Runway, « Avec Act-1, les regards, les micro-expressions, le rythme et l’interprétation sont tous fidèlement reproduits dans le produit final généré. » Elle va même au-delà de la simple marionnettisation en créant des scènes complexes à partir de la technologie vidéo IA de troisième génération et en les intégrant à la performance humaine.