Ce capteur d’appareil photo pour smartphone pourrait faire des photos floues une chose du passé

Les modules caméra du OnePlus 12 et du Google Pixel 8.
Google Pixel 8 (à gauche) et OnePlus 12 Andy Boxall / Tendances numériques

La société parisienne Prophesee a fait des vagues l'année dernière en présentant sa technologie de capteur Metavision basée sur des événements pour les caméras des smartphones. L'idée principale derrière cette pile était de faire en sorte que les images floues appartiennent au passé, démontrant des résultats impressionnants au cours de la phase de développement.

Au MWC 2024 , il a réalisé une autre avancée majeure en partenariat avec Qualcomm. La société, qui travaille sérieusement dans le domaine des systèmes de vision neuromorphique, a annoncé que sa technologie de capteur Metavision avait désormais atteint le stade de la production.

Prophesee indique à Digital Trends qu'il a développé un capteur en collaboration avec Sony qui exploite le réglage logiciel personnalisé et la puissance de feu fournie par le chipset haut de gamme Snapdragon 8 Gen 3 de Qualcomm. À un niveau fondamental, le capteur Metavision comble le manque de données visuelles à un rythme de la microseconde en tandem avec un capteur d'image, ouvrant la porte à des images sans flou dans des scénarios d'obscurité totale et extrêmement lumineux.

« Les capteurs brevetés Metavision et l'IA de Prophesee imitent le fonctionnement de l'œil et du cerveau humains », explique la société. L'approche basée sur les événements de la technologie des capteurs MetaVision déploie l'annulation du flou de mouvement pour garantir que les résultats finaux ne montrent aucun signe de flou déclenché par le mouvement.

Comment Prophesee essaie de tuer les photos floues

Vitrine de capteurs Metavision.
Prophétiser

La plupart des appareils photo de smartphones, même les produits phares de premier plan, ont du mal à gérer les objets en mouvement rapide, ne parvenant pas à maintenir un verrouillage de mise au point approprié. En conséquence, non seulement les images semblent déplacées, mais les artefacts de mouvement les rendent presque inutiles.

Le flou de mouvement devient particulièrement apparent dans des situations d'éclairage difficiles ou la nuit lorsque des solutions telles que la réduction du bruit multi-images ne sont pas à la hauteur de leur véritable potentiel. Prophesee prétend offrir des « niveaux sans précédent » de qualité d’image dans « des scènes rapides et peu éclairées ».

Contrairement à un capteur d'appareil photo de smartphone typique sur lequel la quantité de lumière varie au cours de la fenêtre d'exposition, le capteur Metavision facilite un « temps d'exposition perpétuel » pour capturer le mouvement en continu. «C'est comme si vous aviez un appareil photo de 10 000 images par seconde dans votre téléphone», affirme l'entreprise.

En plus de proposer un capteur personnalisé co-développé avec Sony, Prophesee accorde également la même attention à la pile logicielle et aux services d'intégration qui l'accompagnent. « Le logiciel Metavision Deblur atteint désormais le stade de la production. Nous intégrons à la fois le matériel et le logiciel dans les téléphones mobiles », a déclaré la société à Digital Trends.

L'idée est d'offrir une expérience transparente aux acteurs de l'industrie des smartphones afin qu'ils déploient l'intégralité du kit matériel et logiciel Metavision sur leurs appareils respectifs pilotés par Snapdragon. Notamment, la référence a été fixée au silicium phare Snapdragon 8 Gen 3, apparemment en raison de sa puissance de feu brute, de son FAI avancé et de ses capacités d'IA de nouvelle génération.

Un avenir passionnant pour les appareils photo des smartphones

Différence créée par la technologie Metavision.
Prophétiser

La solution de Prophesee est entièrement fonctionnelle sur le capteur de caméra mobile Sony IMX636. Actuellement, la technologie n'a été testée que pour l'appareil photo principal d'un téléphone. La société indique cependant à Digital Trends que les futures itérations du capteur Metavision envisagent de prendre en charge plusieurs capteurs, notamment des capteurs ultra-larges et de type téléobjectif.

Dans son état actuel, le capteur événementiel de Prophesee ne peut opérer que par magie pour produire des images fixes sans flou. Mais l'entreprise nous dit que le support des vidéos figure également sur la future feuille de route.

"Il s'agit avant tout d'une plate-forme de détection vidéo, utilisée pour capturer et traiter le mouvement dans divers cas d'utilisation", a déclaré un porte-parole de Prophesee à Digital Trends. La société n'a pas précisé quand exactement nous verrons un capteur Metavision en action sur un smartphone disponible dans le commerce. Sur une note positive, les téléphones alimentés par Qualcomm Snapdragon 8 Gen 3 sont déjà sur le marché, et avec le portefeuille Metavision maintenant au stade prêt pour la production, l'attente ne devrait pas être longue.

D'après ce que Prophesee a montré jusqu'à présent dans les démos, si le capteur Metavision tient ses promesses, il pourrait ouvrir un tout nouveau chapitre pour la photographie sur smartphone où l'utilisateur moyen n'aura pas à ajuster la vitesse d'obturation et d'autres paramètres pour obtenir un flou parfait. des photos. Et c’est un avenir assez excitant auquel penser.