Hablemos

Experimento · En uso

De una imagen fija a un plano de cine con IA

Un método para que 25 planos de vídeo generados por separado parezcan de la misma película y para no gastar vídeo en planos que no valían.

Cómo se ve

  • Dos pares de imagen y plano: unos trabajadores descargando grano en un puerto al atardecer y dos manos con guantes sobre una balaustrada, a la izquierda la imagen fija y a la derecha el plano animado
    A la izquierda, la imagen fija; a la derecha, el plano ya animado

Qué problema resuelve

Al generar vídeo con IA lo normal es gastar a ciegas, con planos que no encajan entre sí. Con este método el encuadre se decide en la parte barata, la imagen, y el vídeo solo se genera cuando la imagen ya vale.

Cómo funciona

  1. 01

    Primero la imagen, después el movimiento

    Cada plano nace como imagen fija, donde se decide escena, encuadre y luz. Solo cuando vale se anima. La imagen cuesta céntimos; el vídeo, mucho más.

  2. 02

    Cuatro bloques en cada instrucción

    Dos cambian en cada plano (la escena y la cámara con la luz) y dos se repiten idénticos en los 25: el estilo y las restricciones. El estilo común es lo que hace que parezcan de la misma película.

  3. 03

    Las restricciones se escriben

    «Sin texto, sin marcas»: una multitud salió una vez con pancartas llenas de letras sin sentido y desde entonces va en todas las instrucciones.

  4. 04

    La instrucción de vídeo solo describe movimiento

    La escena ya la trae la imagen; si se vuelve a describir, el modelo se inventa cosas y se pierde el encuadre aprobado.

Con qué está hecho

  • Generación de imagen con IA
  • Generación de vídeo con IA
  • ffmpeg

Qué hicimos

  • Probado en una promoción de 82 segundos con 25 planos a 1080p, con voz en off, música y montaje.
  • Se arregló sin regenerar: un tren que salió marcha atrás se invirtió en el montaje y una estatua que el filtro de un modelo no quiso animar se resolvió con un zoom lento en local. Cero créditos en ambos.
  • Un personaje recurrente que cambiaba de cara se fijó con una descripción de texto, una imagen de referencia y una hoja de ángulos.

¿Tienes un proyecto parecido?

Cuéntanos qué necesitas y te decimos cómo lo haríamos y si te sale a cuenta.

Hablemos

Más en el LAB