Bien que la publicité soit beaucoup plus performante que d’autres, la conversion texte-vidéo en est encore à ses tout premiers stades. Donnez-lui une simple invite comme « Un homme qui marche dans la forêt » et vous recevrez une interprétation plutôt simple de ce que vous avez demandé. Donnez-lui quelque chose de plus ésotérique ou imprécis, et cela va cracher des visuels assez sauvages. Pour être clair, je préfère certains plus étranges sur le plan stylistique, mais les gens se transforment en l’un l’autre n’est pas tout à fait ce que j’avais prévu avec une invite.

22. Texte de piste en VidéoLe générateur de texte en vidéo très médiatisé de Runway.Ml est la meilleure version que vous puissiez obtenir, mais cela est plus indicatif de la distance dont ces générateurs ont besoin pour créer n’importe quoi n’importe où et qui est aussi performant que la plupart des autres générateurs d’images IA.La plupart des vidéos incluent une simple prise de vue panoramique ou Dolly pendant que les sujets à l’écran se promènent ou regardent au loin. La qualité de l’image est très similaire au générateur de texte en image de Runway (qui est le précurseur de Stable Diffusion si vous pensez que la vidéo ci-dessus est similaire à différentes diapositives).
zeroscope_v2 XL, A watermark-free Modelscope-based video model capable of generating high quality video at 1024 x 576
Model on @huggingface : https://t.co/OK7IutQtE7
This model was trained with offset noise using 9,923 clips and 29,769 tagged frames at 24 frames, 1024×576… pic.twitter.com/K2jJS9N9KB
— AK (@_akhaliq) June 24, 2023
L’avantage du modèle Runway est que vous pouvez faire durer la vidéo pendant plus de 10 secondes, alors que les autres modèles sont beaucoup plus restreints. . Les utilisateurs reçoivent un peu plus de 100 secondes de génération de vidéo avant que l’entreprise ne leur demande de s’inscrire à l’un des abonnements payants de l’entreprise.
Même si Runway produit une vidéo de bien meilleure qualité que les deux autres modèles, ce n’est rien de plus qu’un joli gadget. La conversion texte-vidéo est cool et amusante, mais elle a encore un long chemin à parcourir.