A continuaciónSiguiente guía
Por qué los vídeos con IA interpretan mal la física
IA visual
GUÍA visual de IA
La coherencia temporal es la capacidad de un modelo de vídeo de IA para mantener estables rostros, objetos, texturas e iluminación de un fotograma al siguiente.
Escuche esta guíaNarrado por IA · ~3 min
El parpadeo es lo que ves cuando falla: los detalles brillan, se desplazan o cambian silenciosamente entre fotogramas. Importa porque los espectadores notan incluso los pequeños cambios de un fotograma a otro, y es uno de los signos más claros de que las imágenes fueron generadas en lugar de filmadas.
Flicker first became a widely known problem when people made video with image generators. If you denoise each frame separately, every frame starts from its own random noise and makes its own small choices about texture, hair strands or the pattern on a shirt. Each frame looks fine alone, but played in sequence those independent choices read as shimmer. Modern video generators, including Stable Video Diffusion (2023), OpenAI's Sora (previewed in 2024), Runway's Gen-3 and Google's Veo models, generate the frames of a clip together in a compressed latent space and use attention across time, so each frame is shaped by the others. That is the main reason recent clips are much steadier than early experiments. Drift still happens, for several reasons. Fine, high-frequency detail such as hair, foliage, water and on-screen text is hardest, because tiny errors in small details show up as sparkle. When something is hidden behind another object, the model has to carry its appearance through the gap, and it may bring it back slightly different. Longer videos are often built by extending or stitching shorter clips, and because the model sees only a limited window of recent frames, identity can wander over time. Compression in the video autoencoder can also add artifacts where chunks join. There are a few common misconceptions. Flicker is not mainly a frame-rate problem, and raising resolution does not fix it by itself. Post-processing can smooth brightness flicker, but it cannot restore a character's face once it has changed. Frame interpolation can make motion look smoother, but it can also smear drift across the new frames. Real fixes happen during generation: temporal attention, reference-image conditioning, and propagating information from earlier frames into later ones.
La chaqueta de un personaje generado tiene tres botones en un fotograma y cuatro un momento después, y luego tres de nuevo, porque los detalles finos no se vincularon firmemente a los fotogramas anteriores.
Un aficionado ejecuta un modelo de imagen fotograma por fotograma sobre un clip de baile para que parezca una pintura al óleo, y las pinceladas del fondo se arrastran y hierven porque cada fotograma comenzó a partir de un ruido aleatorio diferente.
Un editor aplica un filtro antiparpadeo a un clip de IA para suavizar los pulsos de brillo entre fotogramas. La iluminación se estabiliza, pero un rostro que cambia lentamente de forma se mantiene exactamente como estaba, porque el filtro solo corrige el brillo.
Un creador parte de una foto de referencia de un personaje en el modo de imagen a vídeo de una herramienta, por lo que el primer fotograma fija la identidad y el rostro se mantiene más estable de lo que lo haría solo con una indicación de texto.
La investigación se centra en un contexto más largo y una memoria explícita, para que un modelo pueda recordar a un personaje o una habitación durante minutos en lugar de segundos. La generación autorregresiva con contexto almacenado en caché, un mejor acondicionamiento de referencia y el bloqueo de personajes en múltiples tomas son direcciones activas tanto en la investigación como en las herramientas comerciales. Los puntos de referencia como VBench ya califican dimensiones como el parpadeo temporal y la consistencia del sujeto por separado, lo que facilita medir el progreso. Es probable que los clips cortos sigan mejorando más rápido que los largos, porque el costo aumenta considerablemente con la duración. La consistencia entre ediciones, oclusiones y cortes de escena sigue siendo un problema abierto en lugar de uno resuelto.
Boletín gratuito
Tres noticias verificadas sobre IA cada mañana de lunes a viernes, explicadas con claridad. Gratis para siempre y sin anuncios.
Un correo cada día laborable. Date de baja con un clic. Nunca vendemos ni compartimos tu dirección.
Ponte a prueba
Corrección inmediata en cada respuesta y un certificado para compartir, con un ID verificable, cuando apruebas un curso.
Apoya la educación gratuita sobre IA. AI Understanding es una organización sin fines de lucro 501(c)(3): sin anuncios ni muros de pago, nunca. Hacer una donación
La consistencia temporal es la capacidad de un modelo de vídeo de IA para mantener estables las caras, los objetos, las texturas y la iluminación de un fotograma a otro. El parpadeo es lo que ves cuando falla: los detalles brillan, se desplazan o cambian silenciosamente entre fotogramas. Importa porque los espectadores notan incluso los pequeños cambios de un fotograma a otro, y es uno de los signos más claros de que las imágenes fueron generadas en lugar de filmadas.
Cuando los fotogramas se desaminan de forma independiente, cada uno toma sus propias pequeñas decisiones sobre la textura y el detalle. Reproducidas en secuencia, esas elecciones no relacionadas parecen destellos.
Generar un clip en su conjunto, con una atención que conecta los fotogramas, permite que cada fotograma sea moldeado por los demás, lo que reduce la deriva independiente.
Los pequeños errores en los detalles finos aparecen como destellos o parpadeos, por lo que el cabello, las hojas, el agua y el texto son los puntos débiles habituales.
Las herramientas antiparpadeo nivelan los cambios de luminancia. No pueden restaurar la identidad o los detalles de los objetos que el generador cambió.
Si el modelo se condiciona únicamente a los fotogramas recientes, los pequeños cambios se acumulan y el personaje puede alejarse de su aspecto inicial.
sigue aprendiendo
Más guías seleccionadas para este tema.
A continuaciónSiguiente guía
Por qué los vídeos con IA interpretan mal la física
IA visual