Créez des films époustouflants en utilisant des clips générés par l’IA de Morph Studio pour une stabilité inégalée !

Une nouvelle plateforme d’intelligence artificielle pour le cinéma

Vous souhaitez intégrer différents extraits vidéo générés par l’IA de Stability AI dans un film ? Maintenant, il existe un outil pour cela.

Morph Studio, qui possède son propre modèle de conversion texte-vidéo, vient de lancer une plateforme de création cinématographique basée sur l’IA. Cet outil éponyme prend la forme d’un storyboard, où les utilisateurs peuvent créer et modifier des plans en saisissant des indications textuelles pour différentes scènes et les combiner pour raconter une histoire cohérente.

Le processus de création repose sur le partenariat entre Morph et Stability AI, bien que Morph prévoie d’introduire à terme une gamme de modèles vidéo génératifs parmi lesquels les utilisateurs pourront choisir. Le modèle personnalisé de Morph est également disponible en option. Morph appelle le processus de génération, d’édition et de montage croisé un « workflow ». Les utilisateurs peuvent partager leur méthodologie de production unique dans la communauté de créateurs de Morph, où d’autres peuvent reproduire et modifier les modèles en changeant simplement les indications de l’IA.

« Le tournage, le montage et la post-production étaient autrefois des étapes distinctes dans la réalisation cinématographique traditionnelle, mais l’IA brouille les frontières de ces phases et les transforme en un processus continu. Si vous n’êtes pas satisfait d’un plan, vous pouvez le régénérer sur notre canevas. L’IA a introduit un nouveau workflow dans la production cinématographique », a déclaré Xu Huaizhe, co-fondateur de Morph, lors d’une interview avec Toukiela.

Xu fait partie d’une équipe de doctorants en vision par ordinateur qui ont abandonné leurs études à l’Université des sciences et technologies de Hong Kong pour fonder Morph Studio en 2023. Il considère CapCut, l’application de montage vidéo populaire de ByteDance qui utilise également l’IA, comme un concurrent potentiel de Morph et souhaite s’assurer que sa start-up ne soit pas « facilement remplaçable par une autre application de ByteDance ».

La force de Morph, selon Xu, résidera dans sa capacité à créer une communauté d’utilisateurs dynamique. « La communauté est difficile à remplacer », a suggéré le fondateur. En termes de forces technologiques, Xu a déclaré que Morph a fait de grands efforts pour personnaliser son modèle d’IA afin de « mieux répondre aux besoins des créateurs ».

Aujourd’hui, Morph emploie une dizaine de personnes et a jusqu’à présent levé 2,5 millions de dollars de financement auprès de Baidu Ventures.

La génération de mèmes

L’engagement de Xu à créer une communauté autour des vidéos était évident dans la première initiative de Morph : un espace de partage de mèmes générés par l’IA. La start-up avait pour mission de travailler sur des vidéos en haute définition, mais pour explorer les cas d’utilisation, elle a d’abord affiné un modèle pour créer des GIF à partir d’indications textuelles.

« Les jeunes communiquent et consomment des informations à travers les mèmes de nos jours », a déclaré Xu. « Il existe de nombreuses communautés basées sur les images, comme Reddit et 9Gag, mais jusqu’à présent, il n’y avait pas de communauté en ligne basée sur la vidéo. »

Cette observation a incité Xu à créer un groupe Telegram où les gens étaient autorisés à « parler » uniquement à travers des GIFs. Le groupe a rapidement atteint 300 membres, qui ont publié des GIFs mettant en scène Elon Musk en combinaison spatiale ou Donald Trump en train de danser, tous générés avec le modèle d’IA de Morph. Un canal Discord similaire a été lancé ultérieurement. De nos jours, Morph concentre ses ressources sur l’amélioration de la plateforme de production cinématographique.

« Nous avons constaté que les gens ne se soucient pas vraiment de savoir si les GIFs ont l’air un peu faux. Ils aiment pouvoir dire que c’est généré par l’IA », a déclaré Xu. « Les gens utilisent les mèmes pour transmettre des significations plus grandes que ce qu’ils peuvent faire avec des mots. »

L’article a été mis à jour le 1er mars 2023 pour indiquer que l’outil de montage vidéo propose actuellement à la fois Stability AI et le modèle d’IA de Morph en option.