« Utilise simplement ta bouche ! » Le nouveau Siri, disponible l’année prochaine, vous permettra d’utiliser votre iPhone en mains libres.
L'une des révolutions apportées par l'iPhone à l'industrie des smartphones a été l'écran tactile multipoint. Au cours des 18 années suivantes, le tactile est devenu le principal moyen d'interaction avec les appareils électroniques.
Mais Apple pense que le tactile ne suffit pas.
En fait, nous avons déjà vu une interaction gestuelle pure basée sur la reconnaissance visuelle sur Vision Pro, qui est presque la solution la plus invisible parmi les appareils AR actuels.
De nouvelles preuves récentes montrent qu'Apple essaie également une autre solution d'interaction homme-ordinateur purement vocale basée sur Siri.
L'image est générée à l'aide de Gemini, car Image Playground ne peut pas être utilisé.
Pas plus tard qu'hier, le journaliste de Bloomberg Mark Gurman a souligné dans une dernière prédiction : l'IA Siri, qui a été retardée pendant 26 ans, pourrait indirectement permettre aux utilisateurs de faire fonctionner l'iPhone entièrement par commande vocale à distance en renforçant les intentions d'application.
C'est un gros gâteau qu'Apple avait déjà peint à la WWDC 2024. Dans une publicité qui a été accusée de publicité mensongère, Apple a montré l'actrice Bella Ramsey posant des questions à Siri, et Siri collectant des informations à travers les applications et donnant des réponses :
Dans la publicité, Bella demande à Siri le nom des participants à un événement, et Siri répond en appelant rapidement son calendrier. | YouTube @QuirkyFilms
Comme Apple Intelligence n'a jamais été en mesure de réaliser une telle fonction, cette publicité a été retirée des rayons d'Apple et « Siri plus intelligent » a été reporté à 2026.
Selon Marc Gurman, les retards répétés de l'IA Siri ne constituent pas en soi un problème majeur. En revanche, la fonction sous-jacente sur laquelle cette fonctionnalité repose mérite davantage d'attention.
Si la nouvelle IA Siri veut réaliser les grandes promesses faites par Apple lors des deux WWDC et conférences de presse, la fonctionnalité App Intents d'iOS doit être considérablement améliorée à l'avenir.
Image : Fast Company
Vous n'avez peut-être pas entendu parler du nom App Intents, ce qui n'est pas surprenant, car il ne s'agit pas d'une fonctionnalité distincte, mais d'un framework de fonctionnalités système lancé par Apple dans iOS 16 en 2022, remplaçant les précédents SiriKit Intents, et c'est une fonctionnalité principalement destinée aux développeurs.
Image : Développeurs Apple
La fonction d'App Intents est exactement comme son nom, qui est principalement utilisé pour afficher « l'intention » d'une application.
Prenons l'exemple de la recherche Spotlight d'iOS. Outre la recherche directe d'applications, vous pouvez également saisir des commandes, comme « Créer » ou « Scanner », et le système affichera automatiquement des options de fonction dans l'application.
Cela démontre également intuitivement la fonction de base des intentions d'application : créer un « canal rapide » pour diverses fonctions initialement présentes dans l'application et intégrer les entrées de ces canaux rapides avec les fonctions au niveau du système iOS (telles que Siri, Focus Search, Shortcuts, etc.), permettant aux utilisateurs de les appeler rapidement sans ouvrir l'application .
Image : Développeurs Apple
C'est exactement ce que Marc Gurman avait prédit : la nouvelle IA Siri sera capable d'effectuer des opérations plus complexes à l'avenir.
Par coïncidence, des raccourcis de fonctions similaires ne sont pas exclusifs à Apple. HarmonyOS de Huawei propose également un service similaire appelé Intents Kit, qui permet de connecter les entrées système aux fonctions des applications ou des métaservices :
Figure｜Huawei Developer Alliance
Cependant, en raison des efforts de publicité et des restrictions d'entrée d'Apple, seuls les trois principaux éléments mentionnés ci-dessus – Siri, Focus Search et Shortcuts – peuvent appeler App Intents pour effectuer des opérations dans iOS.
Compte tenu du nombre limité d'utilisateurs de Siri et de la recherche ciblée, les raccourcis sont les plus fréquemment utilisés. Ces raccourcis, comme la gestion rapide du compte, le recadrage et l'ajout d'un filigrane aux photos, ainsi que l'envoi des photos de la veille vers WeChat pour le transfert de fichiers, fonctionnent essentiellement via les intentions d'application.
Accédez directement à la fonction de numérisation interne d'Alipay grâce à une recherche ciblée
Quant aux futures opérations automatisées menées par l'IA Siri, se référant à la méthode de raccourci actuelle pour appeler les intentions d'application, iFanr estime qu'il s'agira d'une logique très simple en « deux étapes » :
- Renforcer les fonctions applicatives directement appelables par les App Intents. Le framework App Intents actuel exige des développeurs une écriture active, et le nombre d'applications qu'il peut couvrir est très limité. Apple pourrait ultérieurement créer une nouvelle API permettant au système de lire directement la liste des fonctions applicatives, élargissant ainsi le champ d'application des appels App Intents.
- Le modèle vocal d'Apple Intelligence peut aider Siri à mieux segmenter et comprendre les commandes vocales des utilisateurs, et utiliser le modèle côté appareil sur l'iPhone pour convertir les commandes en langage naturel en une combinaison d'appels séquentiels d'intentions d'application, permettant ainsi le fonctionnement automatique d'étapes complexes.
Marc Gurman prédit qu'Apple pourrait lancer cette nouvelle combinaison IA Siri + App Intents dès la conférence de printemps 2026. À ce moment-là, les opérations qui peuvent être réalisées pourraient être similaires à « Dis Siri, recadre toutes les photos prises au dîner d'hier soir en carrés, envoie-les sur WeChat de XXX et crée le même programme samedi prochain », et il n'y a pas du tout besoin de toucher l'iPhone.
Image : Lifehacker
Cependant, avant cela, cette nouvelle méthode de commande vocale doit encore subir des tests à long terme, notamment pour certains scénarios à haut risque (comme le paiement Alipay ou le contrôle des dispositifs médicaux connectés à Internet, etc.), qui nécessitent un contrôle plus strict du modèle Siri. Il n'est pas exclu qu'elle soit à nouveau reportée au printemps prochain.
D'un point de vue produit, même si cette méthode de fonctionnement entièrement basée sur la voix peut d'abord être mise en œuvre sur l'iPhone, elle sera certainement utilisée dans d'autres scénarios que les seuls smartphones à l'avenir.
Au lieu de cela, l'Apple Watch, le HomePod et même l'écran de contrôle central de la maison intelligente et le robot de bureau, ainsi que les appareils AR comme Vision Pro, deviendront les principaux bénéficiaires de l'interaction vocale pure de Siri.
En d'autres termes, cette « combinaison de punch » de l'IA Siri et des App Intents améliorés est un nouveau système interactif qui profite à la fois aux utilisateurs sans barrières et aux nouvelles formes de produits, ce qui est très cohérent avec notre imagination précédente de la puissante capacité d'Apple à combiner logiciel et matériel.
Il ne reste plus qu’à Apple pour le livrer dans les délais.
#Bienvenue pour suivre le compte public officiel WeChat d'iFaner : iFaner (ID WeChat : ifanr), où du contenu plus passionnant vous sera présenté dès que possible.