Pipeline de producción de dramas cortos de IA: Guion → Dirección con modelos grises de Blender → Generación de video → Edición
Crear un clip de pocos segundos con IA generativa es fácil, pero hacer un drama corto de decenas de segundos a varios minutos es difícil. Este artículo presenta un pipeline donde la dirección se decide en Blender y la creación de imágenes se deja a los modelos generativos.
Aunque se ha vuelto fácil crear "clips de pocos segundos plausibles" con IA generativa, es difícil crear algo que se pueda ver como un drama corto de decenas de segundos a varios minutos. Los desafíos específicos incluyen que la posición del personaje cambie en cada corte, que la dirección de la cámara no conecte y que la duración sea impredecible.
Este artículo presenta un pipeline que se está probando: "Decidir la dirección en Blender y dejar la creación de imágenes a los modelos generativos". El proceso general consiste en [1] Guion/Lista de tomas, [2] Dirección con modelos grises de Blender (gray bo...), generación de video y edición.
Para los pasos que requieren una GPU, como el renderizado y la generación de video, se alquilan instancias de CloudGPU por minuto.
Esta noticia es un resumen. La versión completa y verificable está en la fuente original:
Leer el original en Zenn (ComfyUI) ↗