Cómo utilizar el generador de videos con inteligencia artificial Dream Machine

IA + Vídeo

Dream Machine es el último generador de videos de IA gratuito del mercado. Esta plataforma de IA, creada por la empresa emergente Luma Labs, genera un video de 5 segundos a partir de un mensaje de texto o una imagen cargada. Conozca cómo funciona Dream Machine, con qué datos se entrenó y cómo utilizarla.

Cómo utilizar el generador de videos con inteligencia artificial Dream Machine

Luma Labs presentó recientemente un nuevo generador de video impulsado por IA llamado Máquina de los sueñosDream Machine permite a cualquier persona crear fácilmente vídeos de estilo cinematográfico a partir de imágenes e indicaciones de texto.

En las revisiones iniciales, los usuarios descubrieron que, si bien herramientas como Sora de OpenAI pueden crear videos con un aspecto más realista, Dream Machine es rápida y capaz de generar 120 cuadros en solo 120 segundos. Su nivel gratuito incluye 3 generaciones por día y 30 generaciones por mes, además de capacidades de conversión de texto a video, imagen a video y extensión de video.

«Una toma panorámica del Half Dome en Yosemite» de Dream Machine

Dream Machine es un gran paso adelante para permitir que las personas hagan videoclips sin necesidad de capturar imágenes. A continuación, explicaré cómo acceder a Dream Machine y usarla para hacer videos.

¿Qué es la máquina de los sueños?

La máquina de los sueños utiliza inteligencia artificial para crear sueños de 5 segundos videoclips A partir de texto e imágenes, los clips de 5 segundos se pueden editar juntos para crear videos de marca, contenido para redes sociales o proyectos personales.

Simone Biles gana el oro en los Juegos Olímpicos de París

Dream Machine funciona tanto en dispositivos móviles como en la web de escritorio con una interfaz sencilla. Para obtener acceso, dirígete al sitio web de Luma Labs e inicia sesión con una cuenta de Google. Al momento de escribir este artículo, Luma Labs tiene uso limitado hasta 3 generaciones por día para usuarios gratuitos.

Dream Machine ofrece la posibilidad de crear 30 vídeos gratis al mes. Sin embargo, si eres un creador que planea usar la herramienta de forma más extensiva, puedes considerar actualizar a un plan pago, que ofrece más funciones, procesamiento más rápido y límites de uso más altos.

Precios de suscripción a Dream Machine

  • Estándar: 120 generaciones, $29,99 al mes
  • Pro: 400 generaciones, $99,99 al mes
  • Premier: 2000 generaciones, $499,99 al mes

Cómo utilizar el generador de texto a vídeo de Dream Machine

Dream Machine tiene un cuadro de entrada de texto donde puedes generar un video usando IA de forma gratuita y un interruptor para «Mejorar» o transformar el mensaje de entrada. Lee el Consejos rápidos y escribe tu mensaje en el cuadro de búsqueda. Con el mensaje correcto, Dream Machine puede generar movimientos y ángulos de cámara interesantes, no solo tomas estáticas, lo que agrega dinamismo a los videos.

Una vez que hayas hecho clic en «Probar ahora», hayas creado una cuenta e iniciado sesión, verás el cuadro de entrada de mensajes (captura de pantalla a continuación). Sigue estos pasos para generar un video:

  1. Ingresa el texto que quieres convertir en video. Puede ser un fragmento de un guion, una publicación de blog o cualquier contenido escrito.
  2. Haz clic en la flecha Generar y deja que la IA haga su magia. Tu video estará listo en unos segundos (salvo que haya demoras en el procesamiento).
  3. Previsualiza el video. En Dream Machine, puedes «Extender» un video, haciéndolo más largo usando IA generativa agregando otro clip al final.
  4. Descarga para compartir. Puedes acceder a tus generaciones desde la Galería.

Aunque Dream Machine puede brindarte hermosos videoclips, necesitarás un editor de video de uso general para editar y combinar los clips en un video o collage de mayor duración. Kapwing te permite montar los clips generados, acortarlos, agregar texto preciso y agregar música. Incluso puedes generar voces de IA para los videos de IA que hayas editado, haciendo coincidir los videos generados con voces sintéticas.

Cómo ampliar un vídeo en Dream Machine

Una vez que hayas generado un video, usa el botón «Extender» para agregar otros 5 segundos. Esto puede crear un videoclip más largo con coherencia de personajes.

A continuación, se muestra un ejemplo de un video de 10 segundos realizado a partir de un video de 5 segundos de «una persona editando un video». Aunque el clip original no mostraba la cara del editor, utilicé la función Extender para hacer que el clip fuera más largo con el mensaje «Apaga su computadora y se pone de pie».

Vídeo extendido, con mensaje «Apaga su computadora y se pone de pie»

Cuando extiendo y especifico el tema en el nuevo mensaje («ella»), el video se aleja y captura la cara de la mecanógrafa. Aunque el tema del video no se «pone de pie» ni «apaga la computadora», es una buena demostración de las capacidades de Dream Machine.

Cómo utilizar el generador de imágenes y vídeos de Dream Machine

Dream Machine también admite la transformación de una imagen en un vídeo utilizando IA y animación entre dos imágenes.

  1. Selecciona la imagen que quieres usar como primer fotograma del vídeo generado. Para cargarla, haz clic en el icono de imagen que se encuentra en el lado izquierdo de la entrada de texto. Puedes cargar una segunda imagen para definir el fotograma inicial y final; Dream Machine interpolará entre las dos imágenes. Escribe un mensaje (opcional) para definir la acción que quieres en el vídeo.
  1. Haga clic en la flecha Generar para crear su vídeo.
  2. En la galería “Mis Creaciones”, elige el vídeo que deseas descargar y haz clic en el botón “Descargar” para guardar el vídeo en tu computadora o teléfono.

A continuación se muestra un video de ejemplo que generamos a partir de una imagen de Ariana Grande dibujada a mano:

Especificaciones del video

  • Tipo de archivo:Las descargas de Dream Machine son archivos MP4.
  • Duración:Los clips de Dream Machine duran 5 segundos. Extender aumenta la duración en 5 segundos cada vez que se usa.
  • Resolución:Dream Machine puede generar videos con una resolución de 1024×1024 píxeles, que suele ser mayor que la calidad de generadores de videos de IA similares.
  • Tamaño:Los archivos descargados tenían un tamaño entre 2 y 5 MB.
  • Velocidad:La promesa de la herramienta es que puede crear 120 cuadros en 120 segundos. Sin embargo, Los usuarios iniciales han informado El procesamiento del vídeo demora más de 40 minutos debido al alto volumen de tráfico en el sitio. Parece que Dream Machine se ralentiza cuando hay una gran cantidad de personas usándolo.
  • Licencia:Los videos creados con Dream Machine vienen con una licencia estándar, que permite el uso personal y comercial. Sin embargo, siempre es recomendable revisar la términos de licencia específicos proporcionado por Luma Labs para garantizar su cumplimiento.

«Una persona está parada en la parada del autobús, navegando en su teléfono»

¿Con qué datos se entrena Dream Machine?

Si bien Runway ML utiliza varios modelos entrenados previamente para diferentes tareasDream Machine es Entrenado directamente en datos de video, lo que le permite comprender y generar mejor contenido de video. Aunque Luma Labs no ha revelado su conjunto de entrenamiento, el modelo puede generar varios movimientos y ángulos de cámara, lo que sugiere que los datos de entrenamiento incluyeron videos con diversas técnicas cinematográficas.

Limitaciones: problemas comunes y mejores prácticas

Dream Machine ha sido entrenado para comprender y generar movimientos, acciones y física realistas en videos. Es ideal para generar escenas realistas genéricas, como «Una mujer tomando un café». Sin embargo, aún suele malinterpretar el movimiento y produce resultados incoherentes. Estos son algunos de los problemas que encontré al probar Dream Machine:

  • Tiempo de procesamiento: Los mensajes de texto a video generalmente se procesan más rápido que los de imagen a video. Algunos usuarios han informado que el uso de imágenes como indicaciones dio como resultado que su video tardara 45 minutos en procesarse.
  • Movimiento de transformación: Los usuarios han informado de problemas como metamorfosis lo que significa que los objetos cambian de forma durante una acción complicada, lo que da como resultado movimientos de apariencia poco natural.

Ejemplo de transformación «Un equipo de gimnastas con leotardos de EE. UU.»

  • Representar erróneamente a personas reales:En nuestras pruebas, vimos que Dream Machine no representaba bien a personas reales, como celebridades o figuras mundiales. Los rostros y el parecido no eran precisos.
  • Anatomía:A menudo, los rostros, narices, extremidades y otras características anatómicas de los sujetos del video son inexactos. Al igual que los generadores de imágenes de IA, los generadores de videos de IA tienen dificultades para reproducir con precisión las manos y los rostros, las estructuras anatómicas más complejas con detalles intrincados, movimientos sutiles y proporciones precisas. Estas anomalías hacen que los videos sean asombrosos.
Un ejemplo de una mano en una silla sin ninguna persona unida a ella.
  • Compatibilidad: Asegúrese de que su navegador esté actualizado con la última versión disponible para obtener el rendimiento más óptimo al utilizar Dream Machine.
  • Audio:Los videos de Dream Machine son mudos, sin transmisión de audio ni efectos de sonido.

Si bien la Dream Machine de Luma tiene algunos errores que solucionar, el mayor atractivo de esta herramienta es que tiene un nivel gratuito bastante sólido. Es comparable a Runway y Pika en términos de calidad, y es completamente gratis para probar. Otros generadores de videos de IA no son tan accesibles: Sora AI no está disponible actualmente para el público (mientras se está probando). Seguridad probada) y Kling AI solo está disponible en China. Para los creadores que quieran experimentar con videos con IA, Dream Machine es un buen lugar para comenzar.

Crea contenido más rápido con el editor de video en línea de Kapwing →