Générer un petit film qui suit le déroulement d’une histoire, à partir d’une simple requête, est-ce possible ? Oui, avec l’intelligence artificielle…
au sommaire
Le secteur de la vidéo générée par intelligence artificielle a vu émerger plusieurs fleurons, notamment Gen 3 et Pika Labs. Et d'immenses promesses reposent sur Sora de OpenAI, mais cette annonce a tardé à se concrétiser. En attendant, diverses tentatives ont été effectuées comme celle de Invideo. Nous allons aborder ici la perspective de créer une vidéo étendue, composée de plusieurs scènes différentes, à partir d'une histoire énoncée dans un prompt.
Des créations impressionnantes
Lorsque vous arrivez sur la page d'accueil de LTX Studio, il est possible qu'il faille vous inscrire à une liste d'attente. Toutefois, le délai est assez court, de l'ordre de quelques jours ou semaines. Dès lors que vous recevez un feufeu vert, vous pouvez vous lancer dans la création d'un mini film.
Entre temps, nous vous conseillons de consulter le serveur DiscordDiscord de LTX Studios. Dans la section Showcase, vous pourrez observer certaines des créations réalisées par divers artistes telles que celles-ci.
Storyboard
Comme indiqué dans le titre de ce tutorial, il suffit d'un simple prompt pour que LTX Studio réalise le clip de votre choix. Bien évidemment, plus le prompt sera fourni et plus la vidéo sera de qualité. Vous pouvez donc en la matièrematière vous faire aider par ChatGPT.
Cliquez sur Create a story puis introduisez votre requête. Seule restriction : pour l'heure, l'applicationapplication ne fonctionne qu'en anglais, donc il faudra éventuellement faire traduire votre prompt par GoogleGoogle, ChatGPTChatGPT ou autre, si vous ne maîtrisez pas la langue de Shakespeare.
Le casting
Le premier point proposé par LTX Studio est un casting. Il est possible de modifier l'aspect de ces personnages en cliquant sur Edit ou même de upload un visuel de votre choix. Une fois que le casting vous satisfait, cliquez sur Start pour démarrer la génération du film.
Une fois que votre prompt a été défini, LTX vous propose des personnages pour votre film, qu’il est possible de modifier à loisir. © LTX Studio
Un storyboard complet
À partir de là, LTX Studio génère chaque scène et il présente l'intégralité de l'histoire sous la forme d'un storyboard. Le mieux, pour démarrer, est de cliquer sur Preview. Vous pouvez ainsi visualiser le mini film qui a été ainsi réalisé. Il comporte une suite d'images, une voix et aussi une musique.
Prévisualisation du film que LTX Studios a généré suite à votre prompt. © LTX Studios
Comme vous pourrez le constater, votre clip comporte très probablement de nombreuses imperfections ou illogismes. Il faut savoir que LTX s'appuie sur une banque d'images publiques et libres de droit (Pexels) pour générer ses images. Toutefois, il est possible d'intervenir sur chaque scène afin de la modifier individuellement.
Ainsi, il vous faut cliquer sur Generate video pour animer les scènes de votre choix. Il est possible à partir de l'option Edit frame de modifier une séquence particulière, par exemple, après avoir surligné la zone correspondante, d'enlever des éléments (avec Remove objets) ou encore de remplir une zone, par exemple remplacer un ciel clair par un ciel avec une couleurcouleur sombre et des étoilesétoiles (Generative fill). Vous pouvez aussi supprimer les scènes qui vous semblent superflues et allonger certaines autres.
Une fois ces modifications effectuées, vous pouvez prévisualiser à nouveau la vidéo. Et si elle vous convient, il ne reste plus qu'à l'exporter (Export Video).
