Comment la caméra intelligente Surface Hub 2 utilise A.I. réinventer les réunions

Microsoft a investi dans sa marque Surface pour en faire une plus grande partie de l'espace de réunion sur le lieu de travail – et l'essor du travail hybride a rendu cela encore plus important.

Le Surface Hub 2 et le Surface Hub 2S sont les fruits de ce travail, mais Microsoft s'appuie maintenant sur ceux-ci avec la caméra intelligente Surface Hub 2. Il est conçu pour améliorer l'expérience de réunion pour les personnes présentes dans la salle avec un Surface Hub 2 et un Hub 2S, ainsi que pour celles qui participent à distance.

J'ai eu l'occasion de discuter avec Dave Alles, vice-président de la division Surface de Microsoft, de la nouvelle caméra et de l'avenir du travail à distance.

Sert une foule

Pour commencer, Alles m'a parlé de l'héritage des produits Surface Hub et Surface en général. "De Surface Duo, Surface Pro ou Surface Go, une grande partie du portefeuille Surface est idéale pour les sessions de brainstorming et de collaboration en temps réel qui facilitent le passage de PowerPoint au tableau blanc et vice-versa", a-t-il déclaré.

Il a ensuite expliqué le raisonnement derrière la caméra intelligente Surface Hub 2 et comment il s'agit d'un produit différent pour Microsoft. Selon les propres données de Microsoft, l'utilisateur moyen de Teams a vu une augmentation de plus de 200 % en termes de temps de réunion hebdomadaire depuis mars 2020. La plupart de ces réunions n'étaient pas planifiées.

Microsoft voit cette tendance comme une opportunité de créer des produits et des innovations logicielles pour aider davantage de personnes à faire leur travail et donner à chacun le sentiment de pouvoir participer aux réunions.

« Nous aimons penser que nous développions des solutions hybrides avant la pandémie. Nous pensons qu'il s'agit d'un changement très durable, et l'importance des participants à distance pour toutes sortes de réunions a augmenté de façon permanente, et Surface Hub, lorsqu'il est associé à des appareils à stylet, est un outil puissant », a déclaré Alles.

C'est aussi pourquoi la caméra intelligente Surface Hub 2 est un produit qui ne ressemble à aucune autre webcam sur le marché. Il capture clairement qui parle devant un Surface Hub 2 ou 2S, et ce qui pourrait se passer d'autre dans la pièce. Il se fixe magnétiquement au sommet du Surface Hub 2 ou du Surface Hub 2S et repose dans un corps en aluminium usiné. Il utilise également le traitement du signal, l'intelligence artificielle et l'optique pour améliorer vos réunions Teams, même pour ceux qui ne sont peut-être pas physiquement présents dans la salle.

Parler de fantaisie, cela signifie que la caméra est capable de recadrer, d'ajuster l'éclairage et d'activer de grands angles de vue. Il fait tout cela sans aucun problème de déformation, de distorsion ou de profondeur de champ que les webcams traditionnelles pourraient rencontrer. C'est même si quelqu'un quitte ou entre dans la pièce, ou s'approche ou interagit avec l'écran.

« Toutes les caméras PC que vous voyez se concentrent sur une plage qui n'est pas adaptée au scénario consistant à se lever et à se promener dans votre pièce. Pour Surface Hub, vous êtes dans une salle de discussion ou de conférence, et nous avons un objectif qui nous permet de garder les gens à l'écart. Nous pouvons également avoir beaucoup plus d'humains dans le cadre, alors qu'une caméra PC a une conception qui suppose qu'il n'y a qu'un seul utilisateur », a expliqué Alles.

Plus qu'une webcam

Mais comment ça fonctionne? Eh bien, c'est grâce à un capteur de 12 mégapixels doté d'un objectif de champ de vision de 136 degrés qui peut garder les choses proches et éloignées simultanément, quelle que soit la taille ou la configuration d'une salle de conférence. La caméra est également capable de gérer 1 téraflop de puissance de calcul, soit un billion de calculs en virgule flottante par seconde.

Un algorithme a même été développé pour compenser automatiquement l'inclinaison, la distorsion et les corrections grand angle afin que les objets apparaissent comme ils le feraient dans la vie réelle. Microsoft me dit qu'il a emprunté une partie de cette idée aux films hollywoodiens, de sorte que le mouvement et le zoom captés par la caméra ne sont pas trop agressifs pour les personnes à l'autre bout de l'appel.

Alles a poursuivi en expliquant que les angles de vision de la caméra intelligente Surface Hub 2 sont ce qui la rend assez unique. Le champ de vision réel est supérieur à 180 degrés, de sorte que la caméra peut voir derrière le Hub 2 sur lequel elle repose. Le logiciel recadre ensuite le flux pour obtenir un angle de 136 degrés, de sorte que votre visage soit clairement visible si vous vous tenez à côté de la caméra. Pouvoir avoir de la clarté à la fois à courte et à longue profondeur de champ est l'autre chose qui le rend unique.

«Ce que nous voulions vraiment faire, c'était obtenir un champ de vision très large et un capteur qui obtiendrait des visages clairs si quelqu'un se tenait juste à côté de la lunette du Surface Hub 2, ou même capable de voir la personne debout dans l'arrière de la longue salle de conférence. Nous avons augmenté toute la technologie, qu'il s'agisse de verre, de capteur ou de capacités de calcul, pour pouvoir nous adapter à ces cas », a déclaré Alles.

« Tous les autres appareils photo ont un point focal spécifique, puis les choses qui sont éloignées de ce point focal deviennent floues. Nous sommes uniques au monde à avoir des visages éloignés et des visages proches très clairs en même temps », a-t-il ajouté.

Tout cela a l'air cool, alors vous vous demandez peut-être si l'appareil photo fonctionnera pour votre PC. J'ai demandé, et Alles a dit que la caméra intelligente Surface Hub 2 est uniquement pour Surface Hub 2 ou Surface Hub 2 S. Elle n'est pas compatible avec les PC en raison de son système de montage, qui utilise une prise USB-C d'une taille personnalisée et un POGO brancher.

Le logiciel et les algorithmes à l'intérieur de la caméra sont également spécialement adaptés aux scénarios de salle de conférence, avec un espace ouvert et plusieurs personnes. Microsoft aurait besoin de réajuster l'algorithme de la caméra pour qu'il se concentre sur les personnes proches. Il y a peu de chances que cela se produise.

"Ce sont des choses possibles à faire, il semble y avoir pas mal d'intérêt, et je suis sûr que c'est quelque chose dont nous allons parler, mais nous n'allons pas l'offrir sur PC", a déclaré Alles.

Prix ​​et disponibilité

La caméra intelligente Surface Hub 2 est disponible aujourd'hui à l'achat sur tous les marchés où le Surface Hub est vendu 800 $. Il sera également fourni avec le Surface Hub 2s 85 pouces à partir du 31 mai pour 22 000 $. Il s'associe également à plusieurs mises à jour pour Microsoft Teams, ainsi qu'à Whiteboard, PowerPoint et Outlook.

Les fonctionnalités sont toutes conçues pour rendre les réunions et le travail beaucoup plus naturels pour les travailleurs hybrides. Pour les appareils Surface Hub 2 et Teams Rooms en particulier, cela inclut Front Row dans Teams . Avec cela, la galerie vidéo apparaît en bas de l'écran afin que les participants dans la salle puissent voir des collègues distants face à face, presque comme s'ils étaient dans la même pièce. La base de code pour Whiteboard a également été unifiée afin que Whiteboard sur Surface Hub ressemble et se sente similaire à Whiteboard sur Windows.

Pour compléter les nouvelles liées aux conférences, Teams Rooms. Il reçoit également des améliorations où si vous rejoignez une réunion dans une salle Teams, vous serez invité à activer la vidéo de votre ordinateur portable afin que vous puissiez être clairement vu par les participants distants, peu importe où vous vous trouvez dans la salle. Votre vidéo sera cachée de l'écran de la salle, ainsi que de la galerie des personnes rejoignant des appareils compagnons dans la salle. Microsoft parle des tendances du travail hybride et au-delà dans son rapport 2022 Work Trend Index .