Le modèle de transformateur NVIDIA DLSS améliore la qualité d’image sur tous les GPU GeForce RTX, dominant la technologie CNN

Dans une avancée significative pour les joueurs et les développeurs, NVIDIA a dévoilé son nouveau modèle Transformer aux côtés du très attendu DLSS 4. Ce modèle innovant sera compatible avec toutes les cartes graphiques RTX, couvrant les séries RTX 20, 30, 40 et 50.

Transformation des visuels : le passage de NVIDIA à un modèle de transformateur dans DLSS 4

Traditionnellement, NVIDIA s’appuyait sur les réseaux neuronaux convolutionnels (CNN) pour améliorer la qualité de l’image en ajoutant des pixels aux trames existantes. Malgré les améliorations apportées au fil des ans, cette méthode a atteint ses limites. L’introduction du modèle de transformateur DLSS marque un changement radical, offrant une fidélité visuelle améliorée parallèlement au lancement de DLSS 4.

Si des fonctionnalités telles que la génération multi-images sont exclusives aux derniers GPU de la série RTX 50, le modèle Transformer étendra ses capacités aux générations RTX précédentes. Les rapports de l’annonce officielle de NVIDIA et les informations de Jacob Freeman confirment que les modèles des séries RTX 20, 30, 40 et 50 bénéficieront de ces améliorations.

Le modèle NVIDIA DLSS Transformer prend le relais de CNN et améliore la qualité d'image sur tous les GPU GeForce RTX 1

Bien que les séries RTX 30 et 20 n’aient pas accès à la technologie exclusive DLSS Multi-Frame Generation, elles bénéficieront néanmoins d’améliorations notables grâce à la reconstruction de rayons DLSS « améliorée » et à la super résolution DLSS favorisées par le modèle Transformer. L’implémentation de NVIDIA utilise un transformateur de vision qui analyse méticuleusement les données de pixels dans chaque image, en tenant compte de l’importance des pixels individuels sur plusieurs images pour offrir des détails plus nets.

Cette technique de pointe utilise efficacement deux fois plus de paramètres que les CNN traditionnels, ce qui se traduit par des améliorations notables des visuels de jeu. Les utilisateurs peuvent s’attendre à une réduction des images fantômes et à des bords plus lisses. Les démonstrations de NVIDIA ont mis en évidence des améliorations de performances dans divers titres exigeants. Par exemple, dans Alan Wake 2 , le modèle Transformer s’est avéré supérieur au modèle CNN, offrant une plus grande stabilité dans le rendu du maillage et nettement moins de scintillement.

Dans les scénarios à grande vitesse, comme la représentation des pales de ventilateur, le modèle Transformer s’attaque aux problèmes de clarté là où CNN a du mal. Cela se traduit par une réduction significative des images fantômes, ainsi qu’une amélioration de la clarté visuelle autour des éléments en mouvement comme les câbles.

En conclusion, DLSS 4 améliore non seulement les performances de tous les GPU RTX, mais intègre également le modèle avancé Transformer de NVIDIA pour garantir une stabilité visuelle robuste. Il convient de noter que NVIDIA met également l’accent sur la réduction de la latence comme un élément crucial de cette mise à jour, facilitée par la technologie Reflex intégrée.

Une version mise à jour, Reflex 2, devrait être lancée pour les GPU de la série RTX 50, promettant une latence encore plus faible, avec une disponibilité également sur les modèles RTX antérieurs.

Source et images