A pesar de que la publicidad es mucho más capaz que otros, la conversión de texto a video todavía está en sus primeras etapas. Dale un mensaje simple como “Hombre caminando por el bosque” y recibirás una interpretación bastante simple de lo que pediste. Dale algo más esotérico o impreciso, y escupirá algunas imágenes bastante salvajes. Para ser claro, prefiero algunas más estilísticamente extrañas, pero con personas transformándose en entre sí no es exactamente lo que pretendía con una indicación.
22. Texto de pista a vídeoEl muy publicitado generador de texto a video de Runway.Ml es la mejor versión que puedes obtener, pero eso es más indicativo de hasta qué punto estos generadores necesitan para crear cualquier cosa, casi tan capaz como la mayoría de los otros generadores de imágenes de IA.La mayoría de los vídeos incluyen una simple toma panorámica o con plataforma rodante mientras los sujetos en pantalla deambulan o miran a lo lejos. La calidad de la imagen Es muy similar al generador de texto a imagen de Runway (que es el precursor de Difusión Estable si crees que el vídeo de arriba se parece a diferentes diapositivas).
zeroscope_v2 XL, A watermark-free Modelscope-based video model capable of generating high quality video at 1024 x 576
Model on @huggingface : https://t.co/OK7IutQtE7
This model was trained with offset noise using 9,923 clips and 29,769 tagged frames at 24 frames, 1024×576… pic.twitter.com/K2jJS9N9KB
— AK (@_akhaliq) June 24, 2023
El beneficio del modelo de Runway es que puedes hacer que el video dure más de 10 segundos, mientras que los otros modelos son mucho más restringidos. . Los usuarios reciben poco más de 100 segundos de generación de vídeo antes de que la empresa les pida que se registren en una de las suscripciones pagas de la empresa.
Si bien Runway produce un video de mucha mayor calidad que los otros dos modelos, no es más que un lindo truco. En pocas palabras, La conversión de texto a vídeo es interesante y divertida, pero aún le queda un largo camino por recorrer.
