Pour vous permettre de lancer plus facilement « Original God », Arm a intégré un processeur d’IA dans le GPU
Le 13 août, la société de conception de semi-conducteurs Arm a présenté de nouvelles technologies graphiques et d'IA pour les appareils mobiles lors d'une réunion de communication technique.
Alors que les jeux mobiles à grande échelle dominent le marché, nous avons des exigences de plus en plus élevées en matière de qualité et de performances des jeux, et le rendu GPU traditionnel a atteint son plafond.
▲ Le marché asiatique a une forte demande de jeux mobiles lourds
Arm estime que l'IA est la prochaine technologie clé pour améliorer les performances des processeurs de téléphones portables et a apporté la nouvelle technologie neuronale ARM à la réunion de communication.
En termes simples, il s'agit d'intégrer un accélérateur neuronal au GPU du SoC, offrant ainsi aux smartphones et tablettes des capacités graphiques neuronales dignes d'un ordinateur de bureau. Son application aux GPU Arm est prévue pour 2026.
Cela ressemble un peu à la technologie DLSS de Nvidia, mais Steve Steele, directeur de la gestion des produits de l'unité commerciale des terminaux d'ARM, a déclaré que DLSS s'appuie sur les cœurs tenseurs du GPU de Nvidia, tandis qu'ARM intègre l'accélérateur neuronal dans le GPU, ce qui revient à ajouter un mini NPU à chaque cœur de shader, avec une latence plus faible, une efficacité énergétique plus élevée et une meilleure adaptabilité aux appareils mobiles sensibles à l'énergie.
L'introduction de la technologie neuronale ne vise pas à réduire le nombre de cœurs GPU, mais à continuer de répondre aux besoins d'une résolution plus élevée et de fréquences d'images plus fluides dans le cadre de l'architecture de puce existante.
Basé sur la technologie neuronale Arm, Arm apporte également trois nouveaux cas d'utilisation.
Le premier cas d'utilisation est appelé Arm Neural Super Sampling, ou Arm NSS en abrégé, qui permet le rendu IA en temps réel. Il peut générer une sortie de qualité identique à partir d'une entrée de moindre qualité, ou une sortie de meilleure qualité avec la même entrée. Son exécution ne prend que 4 millisecondes, réduisant ainsi le rendu GPU de 50 %.
Arm a donné un scénario d'application pour cette technologie : d'abord rendre environ 25 % des pixels de la scène, économisant ainsi considérablement la puissance de calcul, la consommation d'énergie et le temps, puis optimiser l'image via Arm NSS, par exemple en passant de 540P à 1080P.
Arm NSS sera disponible pour les développeurs via le kit de développement Arm Neural Graphics. Ce kit est basé sur un plugin Unreal Engine permettant l'intégration d'Arm NSS dans les jeux, ainsi que sur des modèles en format ouvert qui seront déployés sur Hugging Face et inclus dans le kit de développement.
Au-delà de cela, Arm développe deux nouveaux cas d’utilisation pour la technologie neuronale.
La technologie Neural Frame Rate Boosting (NFRU) augmente directement la fréquence d'images en capturant deux images consécutives et en générant une image intermédiaire. Elle permet d'optimiser et de faire passer le contenu de 30 ips à 60 ips à moindre coût.
Le super-échantillonnage et débruitage neuronaux (NSSD) est une extension de NSS d'Arm. Alors que le traçage de chemin est extrêmement coûteux, même pour les cartes graphiques de bureau, NSSD permet de calculer un nombre limité de rayons, de retracer les trajectoires des rayons à l'aide des données des images précédentes, puis de restituer l'image complète grâce à des techniques de débruitage neuronal.
Arm est très optimiste quant aux perspectives de NSSD. Bien que des jeux comme Rainbow Six et Dark Zone Breakout aient expérimenté le ray tracing sur appareils mobiles, la puissance de calcul et la consommation énergétique ont toujours été des points faibles. NSSD utilisera la réduction du bruit par IA pour réduire les coûts et adapter les effets du ray tracing aux appareils mobiles.
Arm a déjà noué des collaborations étroites avec des moteurs de jeu comme Unity, Epic et Godot afin d'assurer une compatibilité immédiate avec la nouvelle technologie. Des studios comme NetEase, Tencent et Sumo Digital ont également rejoint le programme d'accès anticipé pour promouvoir conjointement l'implémentation du rendu neuronal.
À l’heure où les améliorations traditionnelles des performances des puces rencontrent progressivement des goulots d’étranglement, l’ajout de l’IA a sans aucun doute ouvert une nouvelle voie pour l’évolution des performances des puces : elle peut non seulement dépasser les limites de la puissance de calcul, mais également apporter une meilleure expérience utilisateur.
Cette voie a été entièrement vérifiée du côté du bureau, et pour les plateformes mobiles qui sont à la fois exigeantes en performances et sensibles à l’énergie, la valeur de l’IA est encore plus critique.
Pour cette raison, l'introduction active par Arm de la technologie neuronale dans les GPU mobiles signifie non seulement que l'expérience de jeu mobile inaugurera une nouvelle série de progrès, mais envoie également un signal plus fort : cet architecte qui peut influencer l'ensemble de l'industrie de la téléphonie mobile prend des mesures concrètes pour pousser l'industrie dans une nouvelle ère portée par l'IA.
#Bienvenue pour suivre le compte public officiel WeChat d'iFaner : iFaner (ID WeChat : ifanr), où du contenu plus passionnant vous sera présenté dès que possible.