Vampire: The Masquerade – Bloodlines es un clásico de culto: un filtro de difusión estable muestra ahora cómo podría ser un remaster con inteligencia artificial.
En 2021, los investigadores de Intel mostraron cómo la inteligencia artificial podría aplicar una especie de filtro de fotorrealismo a los videojuegos del futuro. En su ejemplo, el equipo dio un nuevo aspecto a Grand Theft Auto 5: la vegetación, el asfalto o los coches con superficies reflectantes fueron calculados por una red sobre gráficos de píxeles.
El equipo entrenó una red con pares de imágenes de capturas de pantalla de GTA 5 e imágenes de calles del mundo real con contenido similar, como una bicicleta o un coche. El sistema de IA de Intel aprendió a transferir el estilo de las imágenes. Los objetos y escenas que eran menos comunes en el conjunto de datos de entrenamiento fueron representados de forma menos convincente por el método.
Sin embargo, el ejemplo mostraba el potencial de los filtros de IA para contenidos 3D, y Nvidia y Tesla también han presentado métodos similares para entrenar algoritmos para la conducción autónoma, por ejemplo.
Así podría ser un remaster con IA de «Vampire: The Masquerade – Bloodlines
Mucho ha llovido desde entonces: los modelos de difusión han sustituido a las antiguas arquitecturas de síntesis de imágenes y pueden renderizar casi cualquier objeto o escena de forma fotorrealista o estilizada. Empresas como Runway ya utilizan estos modelos para estilizar vídeos con métodos imagen a imagen, y hay muchos proyectos en la comunidad de código abierto que hacen cosas similares con contenidos de vídeo y 3D.
Uno de ellos es TemporalKit, una solución para «añadir estabilidad temporal a un renderizado de difusión estable «. En un post reciente en Reddit, una persona utiliza TemporalKit para mostrar cómo sería una remasterización con IA del clásico de 2004 Vampire: The Masquerade – Bloodlines. (Sí, eso fue hace casi 20 años, lo siento).
Los personajes de los videojuegos antiguos se convierten en personas casi fotorrealistas, las escenas callejeras o los interiores de las cocinas parecen casi reales. Como es bien sabido por otros ejemplos, Stable Diffusion sigue luchando un poco con la estabilidad del tiempo.
Arquitecturas más eficientes y enfoques híbridos podrían permitir filtros de IA
El «remaster» de Bloodlines es sólo un vídeo, pero muestra cómo los estudios o las comunidades de modding podrían rehacer visualmente viejos clásicos en el futuro. Con las funciones generativas de modelos como Stable Diffusion, los usuarios pueden incluso determinar su propio estilo de remasterización.
Uno de los obstáculos es el rendimiento, ya que incluso con las tarjetas gráficas más rápidas disponibles en la actualidad, Stable Diffusion no puede generar 60 imágenes por segundo. En su lugar, en el futuro podrían utilizarse arquitecturas más eficientes, como los modelos de consistencia de OpenAI o un enfoque híbrido que se base en el trabajo de Intel en 2021 y resuelva el problema de la falta de datos de entrenamiento con un modelo de IA generativa.
