Les générateurs de texte en vidéo AI arrivent et ils sont impressionnants

Les générateurs de texte en vidéo AI arrivent et ils sont impressionnants


Les générateurs de texte en image artificiellement intelligents (IA) ont éclairé les voies respiratoires jusqu’à présent cette année, mais maintenant une entreprise a taquiné un générateur de texte en vidéo AI.

La société de logiciels de montage vidéo Runway a publié une superbe vidéo promotionnelle dans laquelle elle taquine la création de n’importe quelle scène à laquelle vous pouvez penser, mais comme une vidéo.

La vidéo commence par un opérateur tapant “Importer la rue de la ville”. Une scène de rue est créée puis modifiée avec l’entrée “Rendez-la plus cinématographique”.

Peut-être le plus impressionnant, c’est quand un lampadaire est retiré de la scène en mouvement à l’aide d’un type d’outil de guérison localisée.

La vidéo passe ensuite à “Générer un jardin luxuriant”. Une fois entré, un certain nombre de scènes différentes sont générées pour la lecture de l’utilisateur qui comprend de nombreux styles différents.

Après avoir choisi une scène, l’utilisateur peut choisir une option d’animation telle que l’échelle dans le temps supplémentaire, ainsi que créer du texte à faire apparaître et disparaître.

Ensuite, une vidéo d’un photographe apparaît et “Caractère d’écran vert” est entré dans la boîte de dialogue. Cela sépare le sujet de l’arrière-plan, permettant à l’opérateur de le rendre flou puis de le rendre en noir et blanc.

Runway est un éditeur vidéo depuis un certain temps, mais cette nouvelle offre d’IA semble être totalement nouvelle dans le domaine de la découpe de films. Le logiciel dispose déjà de fonctionnalités d’IA, telles que la possibilité de masquer des objets dans une vidéo.

Les générateurs vidéo AI rencontrent des difficultés

Selon Arts Techniques, l’un des problèmes des programmes texte-vidéo est l’ensemble d’entraînement. Il existe des modèles de formation d’image établis pour les programmes de texte en images d’IA, tels que LAION-5B.

À ce jour, les modèles de formation pour la vidéo IA sont primitifs et il y a aussi des problèmes en raison des exigences de calcul élevées de la vidéo. Cependant, à cette époque l’année dernière, les générateurs d’images AI étaient dans un état similaire, il n’est donc pas exagéré d’imaginer que les générateurs de vidéos AI pourraient faire des pas de géant dans les mois à venir.

Runway est une application basée sur un navigateur et est disponible dès maintenant moyennant des frais mensuels. Mais la fonctionnalité de conversion de texte en vidéo annoncée est encore dans une phase d’accès anticipé et pour la tester, les utilisateurs doivent s’inscrire sur la liste d’attente sur le site Web de Runway.

Leave a Comment