Después de 'Barok' —clips generados con Sora y editados a mano—, DDay.it quería una prueba de vanguardia del nuevo patrón de orquestador, en el que un modelo de frontera gestiona código, gráficos, composición y generadores externos bajo la dirección artística del usuario.
La idea
Una sola metáfora sostiene el clip: el Manhattan amurallado es el sandbox, la chica es el modelo que se escapa, el HUD es el laboratorio, y su contador CONTAINMENT baja del 100% al 0%.
ChatGPT escribió la letra a partir de los propios artículos de DDay.it sobre riesgo de IA y Suno v6-mini hizo la pista de techno oscuro de 4:44. Un personaje se diseñó en GPT-Image 2.5 (brazo robótico oculto bajo tela), con moodboards de fotogramas de baja resolución de Escape from New York y The Warriors. Opus 5.5 analizó la pista con librosa, Demucs y whisper.cpp, escribió un storyboard a lo largo de al menos cuatro versiones y llamó a las API de Seedance 2.5 y Kling 3.0 para el metraje, con un coste de decenas de euros.
El vídeo de 4 minutos y 44 segundos se publicó el 3 de octubre de 2026 con un relato completo del proceso; no se dan cifras de visualizaciones. El resultado real es el flujo de trabajo demostrado, y la admisión de que el equipo se sintió cada vez menos en control.
Un año después de hacer el vídeo de 'Barok' con clips generados con Sora y editados a mano, el sitio tecnológico italiano DDay.it repitió el experimento con un reparto de tareas distinto: para la canción 'Doomed Mode', Claude Opus 5.5 orquestó storyboards, modelos, animaciones, HUD y montaje, mientras los humanos «principalmente tomaban las decisiones». El título de su crónica lo dice sin rodeos: «sintiéndonos cada vez menos en control».
La canción en sí es hecha por máquinas de principio a fin: ChatGPT extrajo la letra de los propios artículos de DDay.it sobre riesgo de IA —una pista de club distópica sobre la contención que falla por pequeños errores y atajos, no por una revuelta de las máquinas («But we ship it anyway»)— y Suno v6-mini la produjo. Un personaje se diseñó en GPT-Image 2.5, una chica con un brazo robótico oculto bajo tela; el moodboard salió de fotogramas de baja resolución de Escape from New York y The Warriors.
Opus 5.5 se encargó entonces de la producción: pidió herramientas para medir la pista (librosa para el ritmo y la energía, Demucs para separar la voz, whisper.cpp para la sincronización a nivel de palabra), construyó un mapa de cada estrofa a una décima de segundo y escribió el storyboard —una única metáfora sostenida en todo el vídeo: el Manhattan amurallado es el sandbox, la chica es el modelo que se escapa, el HUD es el laboratorio que la observa. Un contador CONTAINMENT baja del 100% al 0% mientras un indicador PHYSICAL MODEL: LEARNING sube del 12% al 100%.
El metraje salió de llamadas a las API de Seedance 2.5 y Kling 3.0, con un coste de decenas de euros; el storyboard pasó por al menos cuatro versiones, cronometrado sección por sección hasta el «00:00 — MODE: DOOMED» del outro.
El tema y el método se reflejan mutuamente: una pista sobre perder el control de la IA, hecha cediendo el control de la producción a un orquestador de IA.
Una sola metáfora —ciudad sandbox, modelo que escapa, laboratorio que observa— dio a un clip ensamblado por máquinas una columna dramática legible.
El patrón de orquestador comprimió semanas de trabajo de composición y montaje en un intercambio con un modelo más llamadas baratas a API.
Los respaldos manuales mantuvieron lo humano donde importaba: el diseño del personaje y las decisiones narrativas se tomaron antes de que el modelo se ejecutara.
Cuando el modelo tiene las herramientas, mantén el significado en manos humanas: la metáfora, el personaje y las decisiones se quedaron con los creadores, y eso es lo que impidió que la pieza se disolviera en un resultado genérico de IA.
El vídeo y el relato del proceso se publicaron en DDay.it el 3 de octubre de 2026, un año después de 'Barok'; la crónica enmarca el experimento como prueba del poder del flujo de trabajo del orquestador, y de cuánta dirección habían cedido ya los humanos.
CONSULTA LAS PRUEBAS
Las fuentes
- Doomed Mode: after 12 months we made a new music video with AI, feeling increasingly less in control DDay.it · global.dday.it ·