Le DLSS et la génération d’images ne vont plus rester réservés aux PC équipés d’une GeForce RTX. Arm vient de dévoiler son Mali G2-Ultra NX, un nouveau GPU mobile qui intègre directement des accélérateurs dédiés à l’intelligence artificielle.
Upscaling neuronal, génération d’images, ray tracing amélioré… sur le papier, on commence vraiment à se rapprocher des technologies utilisées sur nos PC gaming.
Des accélérateurs IA directement dans le GPU
Le Mali G2-Ultra NX est le premier GPU Mali qu’Arm qualifie d’« AI-native ».
Concrètement, des accélérateurs neuronaux sont intégrés directement dans les cœurs graphiques.
L’idée ressemble beaucoup à ce que NVIDIA fait depuis plusieurs générations avec les Tensor Cores de ses GeForce RTX : certaines tâches d’intelligence artificielle peuvent être exécutées par du matériel spécialisé plutôt que de monopoliser les unités graphiques classiques.
Arm introduit trois technologies principales.
La première s’appelle Neural Super Sampling, ou NSS. Le GPU calcule le jeu dans une résolution inférieure puis utilise l’IA pour reconstruire une image plus détaillée.
Oui, ça ressemble beaucoup au principe du DLSS Super Resolution.
La génération d’images arrive aussi sur mobile
La deuxième technologie est encore plus intéressante : Neural Frame Rate Upscaling, ou NFRU.
Cette fois, l’IA génère des images intermédiaires entre celles réellement calculées par le GPU.
L’objectif est donc très proche de la Frame Generation de NVIDIA ou d’AMD.
Arm veut par exemple permettre à un jeu calculé à 30 FPS d’être affiché avec une fluidité bien supérieure sans demander au GPU de calculer nativement toutes les images supplémentaires.
Il faudra évidemment voir ce que cela donne sur la latence et les artefacts visuels.
Sur PC, nous savons déjà que la génération d’images fonctionne beaucoup mieux lorsque le framerate de départ est suffisamment élevé.
Un smartphone n’échappera probablement pas à cette règle.
Même le ray tracing profite de l’IA
La troisième brique s’appelle Neural Super Sampling and Denoising, ou NSSD.
Elle combine l’upscaling neuronal avec un système de débruitage destiné notamment aux scènes utilisant le ray tracing.
Le Mali G2-Ultra NX embarque d’ailleurs la troisième génération d’unités ray tracing d’Arm.
Dans une démonstration, l’utilisation des nouvelles Opacity Micromaps a permis à Arm d’augmenter le framerate de 30 % tout en réduisant jusqu’à 70 % la charge liée au ray tracing.
Attention, ce sont des chiffres issus des propres démonstrations d’Arm. Il faudra attendre les premiers smartphones et surtout de vrais jeux commerciaux pour mesurer le gain réel.
Jusqu’à quatre fois plus efficace dans une démo
Arm a déjà créé avec Sumo Digital une démonstration technique appelée Neural Dawn.
En combinant certaines de ses nouvelles technologies neuronales, l’entreprise annonce jusqu’à quatre fois plus d’efficacité en performances et jusqu’à 70 % de trafic mémoire externe en moins par rapport à un rendu natif.
Le nouveau GPU apporterait aussi jusqu’à 24 % de performances supplémentaires dans certains benchmarks et jusqu’à 14 % de mieux dans les jeux sans utiliser les fonctions IA.
C’est important.
Même sans génération d’images, la nouvelle architecture doit donc être plus rapide.
Les jeux mobiles vont-ils vraiment ressembler aux jeux PC ?
Pas demain matin.
Un smartphone reste limité par sa batterie, sa température et sa consommation électrique. Impossible de placer une RTX 5090 dans votre poche et d’espérer que tout se passe bien.
C’est justement pour ça que le rendu neuronal devient intéressant.
Au lieu de calculer brutalement chaque pixel, le GPU peut produire une image plus simple puis laisser l’IA reconstruire une partie du résultat.
Arm annonce déjà des collaborations avec Tencent Games, Unity China et plusieurs moteurs de jeu.
Where Winds Meet devrait notamment faire partie des premiers jeux à exploiter Arm Neural Technology.
Avec tout ça, le gaming mobile prend une direction assez claire : comme sur PC, les prochains gros gains graphiques ne viendront plus uniquement de GPU plus puissants.
L’IA va faire une partie du boulot.