Apple Intelligence : voici tout ce que nous savons jusqu’à présent
Apple Intelligence est la vision d'Apple de l'IA et cherche à changer fondamentalement la façon dont nous interagissons avec la technologie, en intégrant des capacités avancées d'apprentissage automatique et d'IA dans les appareils du quotidien.
Promettant davantage de prose conversationnelle de la part de Siri, une relecture et un résumé de texte automatisés dans les applications, ainsi qu'une génération d'images ultra-rapide, l'écosystème d'IA d'Apple est conçu pour améliorer l'expérience utilisateur et rationaliser les opérations dans l'ensemble de sa gamme de produits. Voici tout ce que vous devez savoir sur la nouvelle IA transformationnelle d'Apple.
Date de sortie et compatibilité d'Apple Intelligence
Apple Intelligence devait initialement être officiellement publié en septembre, coïncidant avec le déploiement d' iOS 18 , iPadOS 18 et macOS Sequoia . Cependant, comme l'a rapporté Mark Gurman de Bloomberg , Apple a ensuite décidé de retarder légèrement la publication d'Intelligence . Il est actuellement disponible pour les développeurs, même s'il semble peu probable qu'Apple Intelligence soit rendu public avant le déploiement de la version 18.1 prévu pour octobre, selon Gurman.
NOUVEAU : Apple Intelligence arrivera plus tard que prévu, avec iOS 18.1 et iPadOS 18.1 en octobre et manquant les versions initiales de septembre. Néanmoins, la version 18.1 entrera en version bêta pour les développeurs cette semaine. https://t.co/LqXDvjO6ef
— Mark Gurman (@markgurman) 28 juillet 2024
La société a précisé que, au moins dans un premier temps, les fonctionnalités d'IA seront disponibles sur les iPhone 15 Pro et 15 Pro Max , ainsi que sur les iPad et les Mac équipés de puces M1 ou plus récentes (et probablement sur les combinés iPhone 16 également, puisqu'ils ' tous fonctionneront sous iOS 18). De plus, les fonctionnalités ne sont disponibles au lancement que lorsque la langue de l'utilisateur est définie sur l'anglais.
Pourquoi cette coupure ? Eh bien, Apple a insisté sur le fait que les processus sont trop intensifs pour le matériel plus ancien, car ils utilisent les moteurs neuronaux, les GPU et les processeurs plus avancés de ces puces plus récentes.
Les utilisateurs qui utilisent un iPhone 15 Pro ou un iPhone 15 Pro Max faisant partie du programme pour développeurs d'Apple ont eu accès à une première version d'Intelligence en juillet avec la sortie d'iOS 18.1 bêta.
Nouvelles fonctionnalités d'IA
Quel que soit l'appareil avec lequel vous utilisez Apple Intelligence, l'IA se concentrera principalement sur trois fonctions : l'aide à l'écriture, la création et l'édition d'images et l'amélioration des capacités cognitives de Siri.
Outils d'écriture
La nouvelle fonctionnalité Writing Tools sera intégrée à iOS 18, iPadOS 18 et macOS Sequoia dès le lancement. Il peut relire les sections d'écriture et de réécriture de l'utilisateur si nécessaire, ainsi que résumer le texte dans l'écosystème d'applications d'Apple, notamment Mail, Notes et Pages. Les développeurs tiers pourront exploiter les outils d'écriture dans leurs propres applications via des appels API.
Par exemple, dans l'application Mail, Apple Intelligence fournira à l'utilisateur de courts résumés du contenu de sa boîte de réception, plutôt que de lui montrer les premières lignes de l'e-mail lui-même. Smart Reply suggérera des réponses en fonction du contenu du message et garantira que la réponse répond à toutes les questions posées dans l'e-mail d'origine. L'application déplacera même la correspondance plus opportune et plus pertinente en haut de la boîte de réception via les messages prioritaires.
L'application Notes verra également des améliorations significatives. Avec Apple Intelligence, Notes offrira de nouvelles fonctionnalités de transcription et de synthèse audio, ainsi qu'une calculatrice intégrée, baptisée Math Notes, qui résout les équations saisies dans le corps de la note.
Terrain de jeu d’images
Les fonctions de création et d'édition d'images seront en grande partie gérées par la nouvelle application Image Playground, dans laquelle les utilisateurs pourront faire tourner les images générées en quelques secondes et dans l'un des trois styles artistiques : Animation, Illustration et Esquisse. Image Playground existera en tant qu'application autonome, avec bon nombre de ses fonctionnalités et fonctions intégrées à d'autres applications Apple telles que Messages.
Apple Intelligence arrive également sur votre pellicule. La fonction Souvenirs de l'application Photos était déjà capable d'identifier automatiquement les personnes, les lieux et les animaux de compagnie les plus importants dans la vie d'un utilisateur, puis de regrouper cet ensemble d'images dans une collection cohérente mise en musique. Avec Apple Intelligence, Memories s’améliore encore.
L'IA sélectionnera les photos et les vidéos qui correspondent le mieux à l'invite de saisie de l'utilisateur (« road trip des meilleurs amis à LA 2024 », par exemple). il générera ensuite un scénario – comprenant des chapitres basés sur les thèmes que l’IA trouve dans les images sélectionnées – et assemblera le tout dans un court métrage. Les utilisateurs de Photos auront également accès à Clean Up, un outil semblable à Magic Eraser de Google , et à des fonctions de recherche améliorées une fois qu'Apple Intelligence aura terminé la version bêta publique.
Siri
Confidentialité d’Apple Intelligence
Afin d'éviter les fuites de données coûteuses et embarrassantes dont certains de ses concurrents ont été victimes ces derniers mois, Apple a placé la confidentialité au premier plan de l'expérience Apple Intelligence, allant même jusqu'à développer sa propre IA privée et sécurisée. un cloud de calcul, nommé Private Cloud Compute (PCC), pour gérer les requêtes complexes des utilisateurs.
La plupart des opérations de routine d'Apple Intelligence seront gérées sur l'appareil, en utilisant les générations les plus récentes de processeurs A17 et de la famille M de l'entreprise, a déclaré Craig Federighi, vice-président senior de l'ingénierie logicielle d'Apple, lors de la WWDC 2024. « Il est conscient de vos données personnelles. , sans collecter vos données personnelles », a-t-il ajouté.
"Lorsque vous faites une demande, Apple Intelligence analyse si elle peut être traitée sur l'appareil", a poursuivi Federighi. « S'il a besoin d'une plus grande capacité de calcul, il peut s'appuyer sur Private Cloud Compute et envoyer uniquement les données pertinentes à votre tâche pour être traitées sur les serveurs Apple Silicon. » Cela devrait considérablement réduire les risques que les données des utilisateurs privés soient piratées, interceptées, espionnées ou autrement fouillées pendant leur transit entre l'appareil et le PCC.
"Vos données ne sont jamais stockées ni rendues accessibles à Apple", a-t-il expliqué. "Il est utilisé exclusivement pour répondre à votre demande et, tout comme votre iPhone, des experts indépendants peuvent inspecter le code qui s'exécute sur ces serveurs pour vérifier cette promesse de confidentialité."
Partenariat ChatGPT d'Apple Intelligence
Apple Intelligence ne sera pas la seule IA générative de pointe à s'installer dans vos appareils Apple cet automne. Au cours de la WWDC, les dirigeants d'Apple et d'OpenAI ont annoncé que les deux sociétés lançaient un partenariat qui verra la fonctionnalité ChatGPT (optimisée par GPT-4o ) – y compris la génération d'images et de texte – intégrée à Siri et aux outils d'écriture. Comme Apple Intelligence, ChatGPT interviendra si les capacités intégrées de Siri ne suffisent pas pour la requête de l'utilisateur, sauf que ChatGPT enverra la requête au cloud de calcul public d'OpenAI plutôt qu'au PCC.
Les utilisateurs n'auront pas à quitter l'écran Siri lorsqu'ils exploiteront les capacités de ChatGPT, Siri indiquera la réponse quel que soit l'endroit où la requête a été traitée. Pour garantir au moins un semblant de protection de la vie privée, l'appareil demandera l'autorisation à l'utilisateur avant de transmettre la demande, ainsi que tous les documents ou images que l'utilisateur a joints.
Apple Intelligence formé aux unités de traitement tensoriel de Google
Un document de recherche d'Apple, publié en juillet, révèle que la société a choisi de former les composants clés du modèle Apple Intelligence en utilisant les unités de traitement tenseur (TPU) de Google au lieu des systèmes basés sur GPU très recherchés de Nvidia. Selon l'équipe de recherche, l'utilisation des TPU leur a permis d'exploiter suffisamment de puissance de calcul nécessaire pour former son énorme LLM, ainsi que de le faire avec une efficacité énergétique supérieure à celle qu'ils auraient pu avoir en utilisant un système autonome.
Cela marque un changement significatif par rapport à la manière dont les activités sont généralement menées dans le domaine de la formation en IA. Nvidia contrôle actuellement environ 70 à 95 % du marché des puces IA. Il est donc pour le moins très inhabituel qu'Apple opte plutôt pour le produit de son rival direct – et révèle ce fait publiquement. Cela pourrait aussi être le signe de choses à venir. La domination du marché de Nvidia ne pourrait pas durer éternellement – nous voyons déjà les hyperscalers d’aujourd’hui se lancer dans la production de puces propriétaires. Au-delà des efforts continus de Google en matière de TPU , Amazon a récemment annoncé qu'il travaillait sur sa propre gamme de puces, qui surpasserait de 50 % les offres actuelles de Nvidia tout en consommant deux fois moins d'énergie. Microsoft a annoncé qu'il utiliserait la famille de puces IA d'AMD en mai.