Brisez le mur dimensionnel ! La technologie noire d’appel holographique 3D de Google est entrée dans la phase d’essai et les appels vidéo seront renversés

Si votre partenaire de relation à distance a un anniversaire, comment allez-vous le fêter ?

Envoyer un message WeChat ? Les mots simples semblent un peu froids.

Passer un appel téléphonique? Les vraies émotions semblent être libérées pas assez complètement.

Passer un appel vidéo ? Il y a toujours un sentiment d'invisibilité.

En ce moment, nous pensons toujours : ce serait mieux si nous pouvions apparaître l'un à côté de l'autre pour la première fois.

Cependant, la porte arbitraire de Doraemon est encore trop avancée pour la technologie humaine au 21e siècle, mais ne vous découragez pas, au moins maintenant nous pouvons nous envoyer un moi virtuel.

Quoi? Pensez-vous que je vais reparler du mystérieux métaverse ?

Je ne parle pas d'un avatar de dessin animé comique sans jambes, mais d'un "vous" holographique qui vous ressemble presque exactement.

Conversation avec de "vraies personnes"

Lors de la conférence Google I/O en mai de l'année dernière, le PDG de Google, Sundar Pichai, a publié Project Starline, un projet capable de réaliser des appels vidéo holographiques 3D sans recourir à des casques.

Le projet Starline est l'un des projets expérimentaux hautement confidentiels de Google. Selon les chercheurs de Google, l'équipe du projet a commencé à faire des recherches techniques connexes il y a 6 ans, et il ne sera rendu public qu'en 2021, et il est resté silencieux depuis lors. presque toute l'année.

Juste au moment où les gens pensaient qu'il s'agissait d'un autre projet de "dessiner un gâteau" de Google, Project Starline a récemment invité des médias et des partenaires, dont The Verge, au laboratoire pour en faire l'expérience par eux-mêmes.

L' éditeur de Verge , Jay Peters, a déploré après l'expérience qu'il s'agissait de l'interaction de réalité virtuelle la plus réaliste qu'il ait jamais connue, "on a l'impression que la science-fiction brille dans la réalité".

Les moyens de communication humaine se sont constamment améliorés avec le développement des technologies de l'information. Des télégrammes anciens aux appels téléphoniques en passant par les appels vidéo, les dimensions de la transmission humaine d'informations ont été continuellement améliorées, et la rapidité et le contenu de la transmission d'informations ont également été continuellement améliorés.

Si ces deux dimensions sont utilisées comme axes de coordination du développement, il n'est pas difficile d'imaginer que la prochaine étape de la technologie de la communication couvrira des contenus plus riches tels que le son, l'image et la localisation spatiale, et pourra les transmettre instantanément sans délai.

Dans de nombreux films de science-fiction, les créateurs de science-fiction pensent que les appels vidéo stéréoscopiques holographiques sont la prochaine génération de méthodes de communication qui répondent à cette définition.

C'est-à-dire qu'après que les humains ont réussi à amener des visages familiers à leurs côtés, la prochaine étape consiste à les amener "en personne" sur les lieux.

En conséquence, le projet Project Starline a vu le jour.

Andrew Nartker, directeur de la gestion des produits chez Starline, a mentionné dans une interview aux médias que leurs percées dans les technologies de communication ont permis aux utilisateurs de devenir plus intimes et connectés avec des personnes du monde entier.

A en juger par l'apparence de l'installation de Project Starline, elle ne semble pas être liée à des mots high-tech tels que "3D" et "image holographique" – il faut savoir que dans les films de science-fiction, les protagonistes sont réalisés à travers un métal futuriste base circulaire Comparé à l'appel de projection stéréo holographique, Project Starline ressemble plus à une commode délicate.

Lorsque le grand écran de Project Starline s'est allumé, le sens de la technologie tardive s'est lentement dévoilé.

Jay Peters a déclaré que Project Starline est comme une fenêtre magique qui relie les deux pièces ensemble. Le chercheur de Google assis en face de lui a presque la même taille et la même apparence que la vraie personne. Lorsqu'il tend une pomme, il peut même sentir la distance spatiale qui se rapproche du monde réel à travers les ombres sur l'image.

C'est comme une interaction face à face à la même table, tellement réaliste qu'on en oublie presque que les deux salles de test sont en fait éloignées l'une de l'autre.

La raison pour laquelle le « réalisme » est utilisé pour décrire cette réunion unique (vous n'entendrez jamais quelqu'un dire que la personne de l'appel vidéo a l'air si réaliste) est que l'écran affiché sur le terminal à écran n'est pas un simple écran vidéo. "humain virtuel" qui est restitué sur la base d'informations telles que des images et des profondeurs, ce qui est la clé pour créer une présence surréaliste.

Secrets 3D

Pourquoi la virtualisation de personnes réelles est-elle plus réelle ? Pour comprendre ce problème, commencez par le fonctionnement de Project Starline.

Assis devant cette exquise "coiffeuse", la chose la plus accrocheuse est ce grand écran de 65 pouces. Il ne s'agit pas d'un téléviseur domestique ordinaire, mais d'un écran à champ lumineux 3D 8K/60 Hz. Les chercheurs de Google l'appellent un monoculaire. la densité de pixels observable est le double de celle des appareils VR tels que l'Oculus Quest, permettant un affichage stéréoscopique plus fin.

Pour que cet affichage de champ lumineux affiche un effet stéréoscopique, il est nécessaire de collecter les informations de profondeur de l'objet. Les chercheurs ont placé plusieurs caméras stéréo binoculaires et caméras infrarouges en haut et en bas de l'écran, de sorte que la distance spatiale des personnages puisse être restaurée en combinant les informations de profondeur sous plusieurs angles.

Plusieurs caméras de suivi monochromes sont également installées des deux côtés et en haut de l'écran pour un positionnement 3D en temps réel des traits du visage du personnage, afin que le modèle du personnage puisse être restauré avec précision lorsque le personnage se déplace.

Lorsque les informations de position et d'image collectées sont transmises à l'extrémité réceptrice, le système rendra trois flux de profondeur en fonction des positions des yeux gauche et droit du public, et les mélangera avec le flux de texture pour rendre un "humain virtuel" réaliste.

À ce moment, lorsque la position de l'œil du spectateur change, la position de l'image suivra le mouvement du globe oculaire pour effectuer une légère déviation de position, ce qui est la réalité spatiale que les images 2D traditionnelles ne peuvent pas fournir.

En plus de briser le "mur dimensionnel" visuellement, Project Starline a également fait beaucoup d'efforts auditifs.

À l'extrémité d'entrée, le microphone peut former un faisceau dynamique directionnel avec les données de suivi du visage pour obtenir une réduction du bruit et une anti-interférence. À la sortie, le système de suivi localise les oreilles du public, simulant l'orientation spatiale de la conversation, donnant l'impression que la bouche parle à l'écran.

Imaginez, lorsque vous souhaitez organiser une vidéoconférence importante avec des collègues et des partenaires, les participants n'ont plus besoin de se concentrer sur le petit écran et leurs yeux n'ont plus besoin d'être flous hors de la caméra, mais peuvent établir un contact visuel naturel avec vous. , et même utiliser un langage corporel pour aider à l'expression, une telle expérience de participation sera un saut qualitatif.

Cependant, à ce stade, le projet Starline est encore loin d'une application pratique.

La rédactrice en chef de Wired Lauren Goode a déclaré après avoir expérimenté Project Starline que bien que les effets visuels de la vidéo holographique soient excellents la plupart du temps, lorsque le personnage bouge trop, l'image stéréoscopique d'origine reviendra brièvement à l'avion, ce qui n'est pas très expérimenté. .

Les chercheurs de Google ont également mentionné que lorsqu'il s'agit de formes complexes (comme des cheveux duveteux, des lunettes optiques) ou d'objets en mouvement, de faux "artefacts" apparaissent souvent, et leur équipe travaille actuellement à améliorer la précision du traitement des images.

Outre les obstacles techniques, le coût de déploiement d'un ensemble complet de Project Starline est également assez élevé.Les écrans à champ lumineux coûteux et diverses caméras optiques sont destinés à n'être que des produits de laboratoire à l'heure actuelle, et il est presque impossible d'entrer sur le marché grand public. possible.

Andrew Nartkerct a déclaré franchement dans une interview avec The Verge que Project Starline est une nouvelle technologie passionnante et une exploration révolutionnaire dans le domaine de l'interaction spatiale, mais ce n'est toujours pas un "produit" à l'heure actuelle.

La mer a un confident, et le monde est comme un voisin

Alors, qu'est-ce que Project Starline essaie exactement de résoudre ? La réponse apportée par l'équipe du projet est également très simple : vous faire sentir que vous êtes avec une vraie personne.

Au cours de la dernière année, le logiciel de conférence à distance représenté par Zoom a été largement utilisé dans les entreprises et les écoles. Les gens sont séparés pour diverses raisons et doivent travailler ensemble via ces logiciels vidéo, et même organiser une réunion rare. La connexion avec les gens a également été dilué en conséquence.

Dans un rapport sur l'impact de la visioconférence sur la productivité, Microsoft a mentionné que les gens sont plus susceptibles d'être distraits pendant la visioconférence que dans la communication réelle, ce qui est une réponse naturelle aux personnes confrontées à des visioconférences très stressantes.

Project Starline, qui offre une expérience de dialogue réel, semble éliminer ce sentiment de pression qui entrave la communication.

Bien que Project Starline regorge de toutes sortes d'équipements photographiques, lorsqu'il fonctionne, ces technologies froides seront laissées pour compte par les participants, car à ce moment-là, la personne qui est assise en face de lui est une personne quasi réelle. la personne".

Les chercheurs de Google ont mené une expérience comparative et ont découvert que par rapport à la communication vidéo traditionnelle, les participants qui communiquaient à l'aide de Project Starline avaient plus de contact visuel et de langage corporel, et étaient capables de se souvenir de 28 % de contenu en plus après la communication. C'est peut-être le charme de la communication naturelle.

À l'heure actuelle, Project Starline n'est qu'une expérience à petite échelle pour les employés de Google. Google a déclaré qu'à partir de cette année, il ouvrira progressivement le test à des partenaires tels que Salesforce, WeWork et T-Mobile pour encourager les gens à établir des connexions plus profondes.

Project Starline gagnera-t-il en popularité à l'avenir en tant que cabine téléphonique pour l'ère 3D ?

Pour un projet aussi avancé technologiquement, il est difficile de se prononcer sur cette question à l'heure actuelle.Project Starline réussira peut-être à devenir un vrai produit, mais il sera également entraîné par des coûts excessifs et conduira à la mortinaissance, et pourrait même devenir Google Une partie de la future technologie AR, VR.

Mais quoi qu'il en soit, ce type de technologie future qui répond aux besoins réels des gens mérite plus d'attention de la part du cercle technologique.

Après tout, à une époque où les gens sont habitués à la séparation, il n'y a rien de plus précieux que de se voir en personne.

#Bienvenue pour prêter attention au compte WeChat officiel d'Aifaner : Aifaner (WeChat : ifanr), un contenu plus excitant vous sera apporté dès que possible.

Love Faner | Lien d'origine · Voir les commentaires · Sina Weibo