Première démonstration publique d’Apple de son iPad « contrôlé par le cerveau » : un tétraplégique embrasse à nouveau le monde avec une seule pensée

Il était allongé dans son lit, à peine capable de bouger, ses membres complètement hors de contrôle. Même le plus simple effleurement de l'écran semblait impossible. Mais ses yeux se fixèrent sur l'écran d'accueil de l'iPad ; quelques secondes plus tard, l'écran s'illumina, une icône fut sélectionnée, et il réussit à « ouvrir » l'appareil d'une simple pensée.

Mark Jackson est l'une des premières personnes atteintes de SLA au monde à contrôler ses appareils Apple par la pensée. Cela est rendu possible grâce au Stentrode, un minuscule stent métallique implanté dans les vaisseaux sanguins de son cerveau pour capter les signaux neuronaux, développé par Synchron, une entreprise spécialisée dans les interfaces cerveau-ordinateur.

Pour compléter ce dispositif, Apple a introduit un nouvel ensemble de protocoles d'interaction homme-machine : BCI HID (Brain-Computer Interface Human-Computer Interaction Standard). C'est la première fois qu'Apple intègre des « signaux cérébraux » dans la méthode de saisie native de son système d'exploitation, aux côtés du toucher, du clavier et de la voix.

En bref, le cerveau devient la prochaine « méthode de saisie » native sur les appareils Apple.

Brainwave + système Apple : la « cyber-fusion » la plus puissante

Le stentrode utilisé par Jackson est un dispositif d'interface cerveau-ordinateur, aussi fin qu'un cheveu, semblable à un stent. Il est implanté dans une veine près du cortex moteur cérébral. Un réseau d'électrodes capte les signaux neuronaux, puis utilise des algorithmes pour identifier l'intention de l'utilisateur et, in fine, contrôler les appareils numériques.

Plus important encore, il s'agit du premier appareil à s'intégrer nativement à l'écosystème Apple. La clé de cette intégration réside dans le nouveau protocole lancé par Apple en mai dernier : BCI HID (Brain-Computer Interface Human Interface Device), la norme d'interaction homme-machine pour l'interface cerveau-machine.

Il agit comme un « langage universel » entre le cerveau et iOS, iPadOS et VisionOS, faisant officiellement des ondes cérébrales une méthode de saisie légitime au même titre que le toucher, le clavier et la voix. Grâce à l'intégration de la fonctionnalité d'accessibilité Switch Control d'iOS, les utilisateurs de Stentrode peuvent désormais utiliser les ondes cérébrales plutôt que les boutons, les appuis ou les glissements.

Mark Jackson a été l'un des premiers patients à recevoir un Stentrode. Atteint de SLA (sclérose latérale amyotrophique), il est incapable de se tenir debout ou de quitter son domicile de la banlieue de Pittsburgh. Cependant, cette technologie lui a offert une nouvelle liberté de mouvement.

Il a subi une intervention chirurgicale en août 2023. Après l'implantation du stentrode, Jackson a commencé à s'entraîner à contrôler le Vision Pro par la pensée. Il s'est « vu » debout au bord d'une falaise alpine et a « senti » ses jambes trembler, même si son corps ne tenait plus debout.

Plus tard, il a progressivement appris des opérations plus complexes : lancer des applications, envoyer des messages et ouvrir des e-mails par le biais du contrôle cérébral. « Pendant le temps qu'il me reste, j'espère promouvoir le progrès technologique et améliorer la compréhension des gens », a déclaré Jackson.

Ses mots révèlent également la mission principale de l’équipe Synchron : faire en sorte que cette technologie profite à davantage de personnes.

Peter, directeur principal des neurosciences et des algorithmes chez Synchron, a déclaré : « Notre vision est de rendre les interfaces cerveau-ordinateur aussi populaires que les claviers et les souris. » Il a expliqué que la difficulté de l'interface cerveau-ordinateur ne réside pas seulement dans la technologie elle-même, mais aussi dans l'absence d'un « langage d'interaction » standardisé.

Ils ont donc collaboré avec Apple pour développer le protocole BCI HID, basé sur la norme HID. « C'est comme un langage universel entre les ordinateurs et les claviers. Nous avons désormais doté le cerveau de son propre protocole de saisie. »

Le BCI HID transmet non seulement l'intention neuronale de l'utilisateur, mais fournit également un retour visuel. Lorsque Mark souhaite sélectionner un bouton, un cadre de couleur apparaît à l'écran. Plus la couleur est foncée, plus le signal neuronal est fort et plus le système est certain que Mark avait l'intention de cliquer sur ce bouton. Mark peut alors « remplir » mentalement ce cadre de couleur, réalisant ainsi une sélection précise.

« Ce type de retour visuel est crucial pour les utilisateurs d'implants BCI. Ils peuvent voir en temps réel si leurs signaux neuronaux sont suffisamment forts, ce qui les aide à mieux se concentrer », explique Kurt Haggstrom, directeur commercial chez Synchron. L'ensemble du système se connecte via Bluetooth, sans équipement ni soignant supplémentaire. Mark « pense » simplement et l'appareil s'active.

Contrairement aux appareils d'assistance traditionnels, BCI HID est un système interactif en boucle fermée qui non seulement reconnaît l'intention de l'utilisateur, mais fournit également des informations contextuelles en temps réel, améliorant ainsi la précision du décodage et la vitesse de réponse.

Il permet également de lier directement des actions mentales à des raccourcis système : imaginez que vous appuyez du doigt pour revenir à l'écran d'accueil, que vous serrez le poing pour ouvrir un message ou que vous agitez la main pour démarrer un appel vidéo. Cela augmente non seulement la liberté de contrôle, mais rend également l'interaction avec le système véritablement « zéro intervention ».

De plus, BCI HID offre un haut degré de confidentialité : les signaux cérébraux sont propres à chaque utilisateur et ne peuvent être manipulés ni lus par d'autres appareils. À l'avenir, Synchron fera de BCI HID une norme d'interaction neuronale multiplateforme et multifournisseur, permettant à tous les appareils BCI de se connecter en toute transparence au monde numérique.

L'implication d'Apple a été perçue comme le coup de grâce. « La capacité d'Apple à identifier et à répondre aux besoins des utilisateurs démontre son engagement à offrir une expérience utilisateur fluide », a déclaré Kurt Haggstrom.

Les interfaces cerveau-ordinateur qui ne nécessitent pas de craniotomie pourraient vaincre Musk

Lorsqu'on parle d'interfaces cerveau-ordinateur, la plupart des gens pensent à Neuralink d'Elon Musk. Les précédents livestreams et tweets de Neuralink sur X ont suscité un vif intérêt pour les interfaces cerveau-ordinateur.

En revanche, Synchro est relativement méconnu en dehors de l’industrie.

Cependant, les deux entreprises entretiennent des liens étroits depuis longtemps. Un week-end, il y a trois ans, alors que Synchron implantait pour la première fois aux États-Unis un dispositif d'interface cerveau-ordinateur chez un patient, Musk a appelé le fondateur et PDG de Synchro, Tom Oxley.

Oxley a rappelé plus tard que Musk pensait que la solution pour l'interface cerveau-ordinateur consistait à retirer la majeure partie du crâne et à le remplacer par une coque en titane intégrée. Cependant, il était fermement convaincu que l'objectif pouvait être atteint sans toucher au crâne.

▲Tom Oxley

Musk a également proposé d'aider Oxley si l'entreprise venait à manquer de fonds pour poursuivre ses objectifs, notamment en matière d'interfaces cerveau-ordinateur. Cependant, peut-être en raison de divergences de philosophie, ce partenariat n'a finalement pas abouti.

En fait, les chercheurs testent des implants de puces cérébrales sur des humains depuis deux décennies, mais presque tous ces dispositifs nécessitent de couper le crâne et d’insérer des électrodes dans le cerveau, avec des fils suspendus à la tête.

En termes simples, un trou est pratiqué au sommet du crâne et un appareil de la taille d'une Apple Watch y est inséré. Sans parler des risques liés à l'opération : même si l'intervention réussit, le cerveau humain peut rejeter l'appareil, ce qui constitue l'une des difficultés techniques des interfaces cerveau-ordinateur invasives.

Stentrode n’a pas ce problème.

La procédure est similaire à l'implantation d'un stent cardiaque. Le dispositif est implanté par la veine jugulaire dans le cortex moteur cérébral (la zone qui signale l'intention motrice humaine). Le cerveau rejette le stentrode en le poussant dans le tissu cérébral. En quelques semaines, le stentrode est alors enrobé dans le tissu et fixé en place.

Tous les signaux cérébraux détectés par la stentrode sont envoyés via un fil qui descend dans une veine et se connecte à un récepteur de la taille d'un iPod Shuffle cousu dans la poitrine du patient.

Semblable à la batterie d’un stimulateur cardiaque, la batterie du récepteur a une durée de vie pouvant aller jusqu’à 10 ans.

Le récepteur transmet les instructions via Bluetooth à l'ordinateur ou à l'iPad du patient, lui permettant ainsi d'accéder à ses SMS et de contrôler d'autres applications. Une fois le Stentrode installé, les patients effectuent des exercices d'étalonnage où l'équipe Synchron les guide dans la réflexion sur les mouvements de différentes parties de leur corps.

Les différences dans les méthodes et les concepts d’implantation conduisent naturellement à des différences dans les performances techniques.

Par exemple, le dispositif N1 de Neuralink possède plus de 1 000 électrodes, capturant davantage de données neuronales, tandis que le Stentrode n'en possède que 16. Les électrodes du N1 sont implantées directement dans le tissu cérébral, capturant des données plus riches qui se traduisent par des clics de souris et des entrées au clavier plus sensibles.

Dans les rapports précédents, les utilisateurs de Neuralink peuvent également déplacer le curseur avec leurs pensées, et la vitesse est encore plus rapide que les opérations de souris de certains utilisateurs ordinaires.

Malgré cela, pourquoi Apple a-t-il finalement choisi de collaborer étroitement avec Synchron plutôt qu'avec Neuralink d'Elon Musk ? Derrière cela se cache une autre solution qu'Apple propose pour les interfaces cerveau-ordinateur : la sécurité.

Comme mentionné précédemment, le Neuralink N1 est un implant invasif à haute densité. Les chirurgies invasives comportent un risque plus élevé et peuvent déclencher une inflammation ou des réactions tissulaires. Le Synchron Stentrode, quant à lui, utilise un implant non invasif à faible densité, offrant un risque chirurgical moindre et une convalescence plus courte, ce qui le rend particulièrement adapté aux patients non éligibles à une craniotomie.

Bien entendu, le coût de Stentrode est que, comme les électrodes ne sont pas en contact direct avec les neurones, la qualité du signal et la résolution sont faibles, la bande passante des données est faible et il ne convient qu'au décodage du signal neuronal de niveau de base.

Une pensée, un tweet

Les paramètres techniques ne sont qu'une partie de l'histoire. Ce qui attire vraiment l'attention chez Synchron, c'est ce qu'il a déjà accompli.

En mars 2024, un patient Neuralink a publié un tweet sur la plateforme X. Pourtant, trois ans plus tôt, Phillip O'Keefe, 62 ans, atteint de SLA, avait déjà tapé la première phrase sur la plateforme X grâce à l'interface cerveau-ordinateur Synchron :

Bonjour le monde!

Il s'agit du premier tweet de l'histoire de l'humanité à être « envoyé » par ondes cérébrales. Il n'y avait ni clavier, ni voix, ni même de suivi oculaire ; tout était « pensé ». Bien que court, ce tweet pourrait valoir plus à ses yeux qu'un roman de 100 000 mots.

Bien sûr, l’histoire de Synchron ne s’arrête pas là.

Lorsque le monde entier était occupé par ChatGPT, de nombreuses personnes réfléchissaient à la manière de l'utiliser pour écrire des articles, des codes et des lettres d'amour, tandis que Synchron réfléchissait à la manière d'utiliser l'IA pour améliorer la technologie de l'interface cerveau-ordinateur.

Mark, 64 ans, est l'un des premiers utilisateurs à avoir expérimenté l'intégration cerveau-machine de l'IA. Bien qu'il ait perdu la plupart de ses capacités physiques et verbales à cause de la SLA, il peut encore utiliser ses ondes cérébrales pour jouer à l'Apple Solitaire, regarder l'Apple TV et même contempler les étoiles sur son Vision Pro.

Plus précisément, Synchron permet aux grands modèles linguistiques comme ChatGPT de capturer le contexte pertinent sous forme de texte, d'audio et de vision, de prédire ce que l'utilisateur pourrait vouloir dire et de lui présenter un menu d'actions parmi lesquelles choisir.

De plus, après l’ajout de GPT-4o, l’interface cerveau-ordinateur Synchron a apporté quatre changements importants :

  1. Communication assistée : GPT génère des options de réponse prédéfinies, éliminant ainsi le besoin pour les utilisateurs de les saisir textuellement.
  2. Prédiction intelligente : GPT combine le contexte pour prédire les besoins possibles, réduisant ainsi considérablement le nombre d'étapes requises.
  3. Entrée multimodale : le GPT-4o accepte les entrées texte, audio et vidéo, fournissant des informations de plusieurs manières
  4. Apprentissage adaptatif : le système apprend progressivement les préférences de l’utilisateur pour parvenir à une personnalisation efficace.

Plus important encore, ce mode d'entrée d'informations multimodal de l'IA et de l'interface cerveau-machine présente certaines similitudes avec les schémas comportementaux du cerveau lui-même. L'équipe Synchron explique :

La raison pour laquelle nous procédons ainsi est que le 4o multimodal est différent : il utilise les données de l'environnement, qui agit comme une extension du cerveau de l'utilisateur. Lorsque l'utilisateur commence à interagir avec l'invite, il reçoit un flux d'informations en temps réel sur tout ce qui se passe dans l'environnement.

Dans une interview avec les médias, Mark a déclaré que ce qui l'avait le plus impressionné était une application dans Vision Pro pour observer les constellations dans le ciel nocturne :

C'est vraiment génial, ça prend vraiment vie. Utiliser cette technologie de réalité augmentée est incroyablement puissant, et j'imagine qu'elle serait tout aussi efficace pour des personnes dans ma situation ou pour d'autres qui ont perdu la capacité de fonctionner au quotidien. Elle peut vous transporter dans des endroits que vous n'auriez jamais cru revoir, ce qui m'offre une autre façon de vivre mon indépendance.

C'est la nouvelle expérience de Mark et aussi le fantasme ultime de nombreuses personnes à propos de l'interface cerveau-ordinateur.

Et Synchron l’a vraiment fait.

Lors de la conférence NVIDIA GTC 2025, Synchron a lancé le premier modèle cérébral d'IA cognitive au monde, Chiral ™ , et a apporté une vidéo de démonstration très choquante.

Un patient atteint de SLA nommé Rodney souffre d'un handicap complet de la main, mais grâce à une interface cerveau-ordinateur et à Vision Pro, son cerveau devient une télécommande, lui permettant de contrôler sa maison intelligente avec son esprit : régler les lumières, écouter de la musique, contrôler la pièce et démarrer les appareils électroménagers.

À cette époque, Oxley exprimait sa confiance :

« Nous utilisons une technologie de pré-formation générative pour construire un véritable « modèle basé sur le cerveau ». ™ Apprendre directement à partir des données neuronales, en faisant abstraction de la source de la cognition humaine, nous permet de créer des fonctionnalités qui peuvent véritablement améliorer la vie des utilisateurs. Tout cela repose sur notre capacité à accéder aux données neuronales à grande échelle, tout comme nous rendons la technologie BCI aussi accessible que l'implantation d'un stent.

Qu'il s'agisse de l'interface GPT-4o ou de l'interface EEG, leur objectif ultime est en fait le même : trouver une nouvelle façon pour tout le monde, en particulier ceux qui sont ignorés par la technologie, de communiquer avec les ordinateurs.

Pour les utilisateurs comme Mark, ils n’ont enfin plus besoin de compter sur les autres et peuvent à nouveau dire ce qu’ils veulent dire, voir les étoiles qu’ils veulent voir et même jouer à quelques jeux de cartes.

Si ce n’est pas là le romantisme ultime de la technologie humaine, qu’est-ce que c’est ?

Les soins humanistes constituent toujours l’arrière-plan ultime de la science et de la technologie

Mais à qui s’adressent finalement ces développements ?

Peut-être devrions-nous examiner de plus près ce que cette technologie signifie pour certaines personnes.

Tom Oxley, PDG de Synchron, a déclaré que les fabricants d'interfaces cerveau-ordinateur doivent actuellement « tromper » l'ordinateur en lui faisant croire que le signal du dispositif implanté provient de la souris. Mais si des normes spécifiques à ces dispositifs étaient établies, le potentiel de cette technologie serait encore plus exploité.

Selon les médias étrangers, Apple utilise désormais une approche similaire pour promouvoir l'intégration des dispositifs d'interface cerveau-ordinateur avec l'écosystème Apple, et prévoit de publier cette nouvelle interface logicielle standard plus tard cette année pour que les développeurs tiers puissent l'utiliser afin de promouvoir l'application ultérieure de la technologie de contrôle du cerveau.

Depuis 2019, Synchron a implanté le Stentrode chez 10 patients.

Morgan Stanley estime qu'environ 150 000 personnes aux États-Unis souffrent de dysfonctionnements graves des membres supérieurs et sont potentiellement les premiers utilisateurs de dispositifs d'interface cerveau-ordinateur. Selon les données de 2021, environ 15,4 millions de personnes dans le monde souffrent de lésions de la moelle épinière, l'une des principales causes de paralysie.

Lorsque vous vous plaignez que votre téléphone portable n’est pas facile à utiliser, certaines personnes trouvent même que c’est un luxe d’« utiliser un téléphone portable ».

Pour les patients paralysés ou atteints de SLA, utiliser un appareil n'a jamais été une évidence. Ils ne peuvent même pas cliquer sur des boutons, faire glisser l'écran, ni même lever la main pour émettre une simple commande.

La définition du terme « opération » donnée par la société humaine a toujours été trop étroite.

Nous pensions autrefois que « fonctionnement » signifiait clics, diapositives, voix et gestes, et nous avons recherché des moyens d’interaction « plus naturels », mais cette définition ne leur a jamais réservé de place depuis le début.

L'avènement des interfaces cerveau-ordinateur a changé la donne. Lorsque les pensées peuvent également devenir un mode de fonctionnement, les individus n'ont plus besoin de s'adapter à l'appareil, mais c'est l'appareil qui les comprend. Même incapable de bouger ou de parler, avec seulement un cerveau clair et pensant, une personne peut toujours se connecter au monde. La véritable accessibilité consiste à adapter le monde à chaque façon d'être.

#Bienvenue pour suivre le compte public officiel WeChat d'iFaner : iFaner (ID WeChat : ifanr), où du contenu plus passionnant vous sera présenté dès que possible.

iFanr | Lien original · Voir les commentaires · Sina Weibo