El modelo NVIDIA DLSS Transformer mejorará la calidad visual en todas las GPU GeForce RTX

Seguimos ahondando en el NVIDIA DLSS 4, esta vez con su último modelo de IA Transformer. Esto lo mencionamos en la noticia oficial del NVIDIA DLSS 4, pero ahora se detalla algo más de información al respecto. La información también proviene del trabajador Jacob Freeman, el cual ofreció algo más de información para tener un contexto de esta tecnología. Tecnología de la que se beneficiarán todos los usuarios con una NVIDIA GeForce RTX. Es decir, desde las primeras GeForce RTX 20 Series hasta las actuales RTX 50.

"Todas las gráficas GeForce RTX contarán ahora con la primera aplicación en tiempo real de "transformadores" de la industria gráfica. Los modelos de transformadores DLSS mejoran la calidad de la imagen con mayor estabilidad temporal, menos imágenes fantasma (ghosting) y mayor detalle en movimiento". Esto era lo único que sabíamos hasta ahora.

NVIDIA Transformer promete mejorar notablemente la calidad visual del DLSS 4

Con NVIDIA DLSS 4, la compañía ha introducido un nuevo modelo de IA conocido como Transformer. Según se indica, el modelo Transformer utiliza el doble de parámetros que el hasta ahora usado CNN. Es decir, que tiene el doble de información para entender la escena que está reconstruyendo por IA. Esto se traduce en "mejorar significativamente" la calidad del reescalado Super Resolution, el Ray Ray Reconstruction y el DLAA. Tecnología que soportan todas las GPU NVIDIA GeForce RTX.

"Anteriormente, el NVIDIA DLSS utilizaba redes neuronales convolucionales (CNN) para generar nuevos píxeles mediante el análisis del contexto localizado y el seguimiento de los cambios en esas regiones a lo largo de fotogramas sucesivos. Tras seis años de mejoras continuas, hemos llegado al límite de lo posible con la arquitectura CNN de DLSS.

Nuestro nuevo modelo de DLSS Transformer utiliza un transformador de visión que permite realizar operaciones de autoatención para evaluar la importancia relativa de cada píxel en todo el fotograma y en varios fotogramas. Empleando el doble de parámetros que el modelo CNN para lograr una comprensión más profunda de las escenas, el nuevo modelo genera píxeles que ofrecen mayor estabilidad, reducción de las imágenes fantasma, mayor detalle en movimiento y bordes más suaves en una escena".

El modelo NVIDIA DLSS Transformer solo mejora la calidad visual, sino que permite corregir deformaciones en la imagen. Hablamos de reducir notablemente problemas como el ghosting o el shimmering. Un claro ejemplo lo tienes arriba, donde se reduce notablemente el ghosting de las aspas del ventilador, mientras que el resto de la escena fija que rodea a estas aspas en movimiento también se ven mucho más definidas. Otro ejemplo está en las mallas metálicas en Alan Wake 2, pudiendo ver como prácticamente desaparece el shimmering al aplicar el modelo Transformer ofreciendo un aspecto visual sin defectos.

Mejora de calidad y rendimiento

El modelo Transformer mejora la calidad visual del NVIDIA DLSS 4, pero no mejora el rendimiento. Ahora bien, justo ayer te hablamos del nuevo modelo de IA integrado en el Frame Generation. Esta tecnología es usada por las GeForce RTX 40 y RTX 50, donde se ha actualizado el modelo de generador de frames. La mejora de la calidad visual respecto al DLSS 3.5 está en el Transformer, pero la mejora de rendimiento está ligada a este modelo optimizado. El cual, en las pruebas, consiguió aplicar una mejora de rendimiento del 10,4% reduciendo el consumo de uso de la memoria de la GPU en un 4,4%.

De esta forma, el NVIDIA DLSS 4 aporta una mejora de calidad visual para todas las GeForce RTX Series. Mientras que los usuarios de la GeForce RTX 40 acceden como extra a un Frame Generation mejorado para aumentar el rendimiento. Y las GeForce RTX 50 añaden adicionalmente el acceso al nuevo Multi Frame Generation. El cual aumenta drásticamente el rendimiento a generar 3 frames por IA por cada frame renderizado por la GPU (vs 1 frame por IA por renderizado de las RTX 40).

La entrada El modelo NVIDIA DLSS Transformer mejorará la calidad visual en todas las GPU GeForce RTX aparece primero en El Chapuzas Informático.