Cette nouvelle fonctionnalité de Google Lens semble tout droit sortie d’un film de science-fiction

Google a introduit AR Translate dans le cadre d'un trio de mises à jour pour Google Lens qui visent à faire avancer la traduction d'images dans le futur. Mercredi, la société a organisé une démonstration lors de la conférence Google Search On 2022 pour montrer qu'AR Translate peut utiliser l'IA pour rendre les images contenant une langue étrangère plus naturelles après la traduction du texte dans une autre langue.

Actuellement, tout texte converti dans une autre langue utilise des blocs de couleur pour masquer des parties de l'image d'arrière-plan. AR Translate préserve mieux l'image en supprimant les blocs et en échangeant simplement le texte pour que l'image traduite ressemble à la photo d'origine.

Ce que vous aimez dans la traduction avec Lens est maintenant encore meilleur.

Grâce aux avancées majeures de l'IA, le texte traduit apparaît parfaitement intégré, comme s'il faisait partie de l'image d'origine. Transformer le texte… en contexte ! #Rechercher sur pic.twitter.com/N8YySv87z1

— Google (@Google) 28 septembre 2022

Google a déclaré avoir optimisé les modèles d'apprentissage automatique afin que AR Translate puisse fonctionner en 100 millisecondes. La vitesse de traduction est rendue possible grâce à la même technologie que Google utilise pour Magic Eraser , que vous essayiez de traduire une capture d'écran ou une affiche avec l'appareil photo à objectif en direct.

AR Translate est une innovation impressionnante qui semble tout droit sortie d'un film de science-fiction. Les gens pourront non seulement traduire les affiches qu'ils verraient dans un musée, un zoo ou une autre attraction touristique lorsqu'ils voyagent dans différents pays, mais un jour, ils pourront également traduire les panneaux de signalisation et les panneaux de vitrine plus rapidement qu'un clin d'œil. un œil. Cependant, nous ne savons pas si la caméra à objectif en direct sera capable de traduire les panneaux dans lesquels le texte est en relief, comme sur les panneaux de construction. Même ainsi, il est impressionnant de voir Google continuer à améliorer l'une de ses fonctionnalités les plus impressionnantes (et les plus utiles).

AR Translate sera déployé sur l'application Google plus tard cette année.