Voici comment l'IA transformera l'iPhone, l'iPad et le Mac cet automne

Points clés à retenir

• L’automne 2024 apporte Apple Intelligence aux modèles iPhone, iPad et Mac équipés d’un processeur A17 Pro ou M1 et versions ultérieures.
• Attendez-vous à des interactions Siri plus intelligentes, à des outils de génération de texte, à des capacités de génération d'images et à la possibilité de contrôler diverses actions à l'échelle du système avec des commandes en langage naturel.
• Apple donne la priorité à la confidentialité avec le traitement sur l'appareil et prévoit de futures conceptions de puces pour améliorer l'IA.

Si vous possédez un iPhone 15 Pro ou un iPad ou un Mac équipé d'un processeur M1 ou supérieur, Apple Intelligence pourrait transformer la façon dont vous interagissez avec votre smartphone, votre tablette et votre ordinateur. Voici à quoi s’attendre avant le lancement à l’automne 2024.

Qu’est-ce qu’Apple Intelligence ?

Apple Intelligence est la version Apple de l'intelligence artificielle LLM (Large Language Model). Cela ressemble beaucoup aux outils existants comme ChatGPT et Google Gemini, sauf qu'il fonctionne uniquement au sein de l'écosystème Apple. De nombreux outils et applications Apple existants bénéficieront du support Apple Intelligence lors du lancement de la fonctionnalité.

Ces nouvelles fonctionnalités d'IA devraient arriver à l'automne avec la sortie d'iOS 18, iPadOS 18 et macOS 15 Sequoia.

Siri devient intelligent

Au cœur d'Apple Intelligence se trouve une version améliorée de Siri, l'assistant numérique de l'entreprise. Apple promet qu'Apple Intelligence rendra Siri plus personnel, plus naturel et plus efficace pour faire apparaître les informations pertinentes. Siri est l'interface via laquelle les utilisateurs interagiront principalement avec le modèle d'IA.

Le nouveau Siri amélioré peut mieux comprendre les demandes orales, y compris celles pour lesquelles vous trébuchez sur vos mots. Le contexte est conservé entre les requêtes, vous pouvez donc faire des choses comme émettre une commande de suivi qui suit le fil de votre conversation. Vous pouvez demander la météo à un endroit, puis envoyer un rappel spécifique à l'emplacement pour le même endroit sans mentionner à nouveau le nom du lieu.

Vous pourrez émettre des commandes plus complexes et Siri devrait être capable de les comprendre. Vous pouvez demander à Siri de rechercher vos photos prises avec une personne spécifique dans un certain endroit, puis de modifier la photo, puis de l'envoyer à un contact. Le contexte est conservé afin que Siri reste sur la même longueur d'onde, à chaque étape du processus.

Une nouvelle fonctionnalité appelée taper sur Siri vous permet d'émettre des commandes à Siri sans utiliser votre voix. Non seulement cela signifie que vous pouvez émettre des commandes « silencieuses » n'importe où en tapant simplement, mais cela transforme efficacement Siri en une interface d'invite de type ChatGPT.

Siri sera également capable de comprendre ce qui se passe sur votre écran à tout moment. Cela vous permettra d'émettre des commandes liées aux informations affichées à l'écran. Un exemple est l'ajout d'une adresse à une fiche de contact lors d'une conversation dans une fenêtre Messages.

Sur iPhone, Siri fait également peau neuve. Au lieu de la bulle Siri habituelle qui apparaît en bas de la page, l'activation de Siri placera désormais une bordure lumineuse autour du bord de l'écran. La mise en œuvre de Siri sur Mac semble en grande partie inchangée, les conversations se déroulant dans le coin supérieur droit de l'écran.

Apple a souligné que les améliorations de Siri se poursuivront tout au long du prochain cycle de mise à jour. Attendez-vous donc à ce que l'assistant devienne plus intelligent avec les nouvelles mises à jour d'iOS 18, iPadOS 18 et macOS 15 Sonoma.

Apple Intelligence parle votre langue

Apple Intelligence vous permet de générer et d'analyser du texte d'une manière qui devrait être utile dans tout le système, que vous soyez sur un téléphone, une tablette ou un ordinateur. Apple a introduit un ensemble d'outils d'écriture qui vous permettent de surligner puis de réécrire des sections de texte, en ajustant le ton. Vous pouvez générer de nouvelles versions ou revenir au texte original à tout moment.

Les réponses contextuelles vous permettent de générer des réponses basées sur le contenu d'un message ou d'un e-mail. Ceux-ci apparaissent dans la zone Type rapide sur un iPhone et fournissent des invites pour recueillir des informations. Vous pouvez appuyer sur quelques cases et Apple Intelligence répondra en conséquence.

En plus de réécrire et de répondre, un nouvel outil de relecture affiche les fautes de grammaire et d’orthographe. Vous pouvez parcourir chaque suggestion une par une ou tout accepter d'un simple toucher ou d'un clic.

Apple Intelligence peut analyser des corps de texte et prendre des décisions en fonction du contexte. Ceci s'applique à des éléments tels que votre boîte de réception e-mail avec une priorisation intelligente. , où vous verrez vos messages les plus importants en haut de votre boîte de réception. Vous recevrez également des résumés en haut de longues chaînes de courrier électronique, vous permettant de rattraper rapidement les discussions que vous avez manquées.

Vous aurez également la possibilité de transcrire le texte des mémos vocaux (pris directement dans Notes, une nouvelle fonctionnalité iOS 18) et via l'application Téléphone sur votre iPhone.

Enfin, Apple Intelligence triera vos notifications en fonction de leur importance. Une nouvelle bascule « Réduire les interruptions » n'affichera que les notifications les plus importantes, comme une version plus intelligente des notifications sensibles au temps introduite dans iOS 15.

Générez des images comme des Emoji personnalisés

Le modèle d'Apple inclut également des capacités d'images génératives, à commencer par Genmoji. Abréviation de « emoji génératif », Apple Intelligence créera de nouveaux emoji en fonction de vos invites, avec plusieurs options à trier. Vous pouvez ensuite les envoyer sous forme de tapbacks, d'autocollants ou d'emoji en ligne dans vos messages. Apple a également présenté une fonctionnalité qui génère des emoji en fonction de l'apparence du contact.

Image Playground est la version Apple d'un outil d'image génératif d'IA, comme DALL-E et Midjourney. Cet outil sera disponible sous forme d'application autonome ; sera intégré à des applications telles que Messages, Freeform et Pages ; et peut être ajouté à des applications tierces à l'aide de l'API d'Apple.

Il fonctionne en marquant des thèmes, des éléments et des accessoires dans une interface visuelle et en générant des images en fonction de ce que vous avez sélectionné. Vous pouvez saisir des invites manuelles ou ajouter des éléments à partir d'une liste de suggestions et sélectionner des styles tels que des croquis, des illustrations et des animations. La génération d'images a lieu sur votre appareil.

Une extension d'Image Playground appelée Image Wand ajoute une génération contextuelle à d'autres applications. En sélectionnant Image Wand dans la liste des outils qui apparaît dans l'application Notes, vous pouvez générer des images en fonction du contexte de votre note ou transformer des esquisses en œuvres d'art finies générées par l'IA.

Apple Intelligence apporte également une édition basée sur des invites à Photos. Non seulement vous pouvez aboyer des instructions sur l'application pour effectuer des modifications standard, comme rendre une image plus chaude, mais vous pouvez également utiliser un outil de nettoyage d'image pour supprimer les éléments indésirables des images.

Apple facilite également la création de films de mémoire à partir de votre bibliothèque Photos. Plutôt que de rechercher manuellement une liste d'images pertinentes, vous pouvez émettre une invite et Photos sélectionnera des images et générera un film pour vous.

Il n'est pas surprenant que les images présentées dans la présentation d'Apple à la WWDC aient ce « look » d'IA générative. C’est la norme en ce qui concerne les images générées par l’IA.

Effectuer des actions dans les applications

Là où Apple Intelligence commence à s'écarter des outils comme ChatGPT, c'est dans sa capacité à effectuer des actions. Il s’agit d’une position unique que seuls les détenteurs de plates-formes peuvent adopter, et Apple ne semble pas perdre de temps pour proposer des actions basées sur des invites sur iOS, iPadOS et macOS.

Apple a donné de nombreux exemples lors de sa révélation à la WWDC, depuis des commandes simples telles que « créer un dossier appelé Nouveau » et « retourner mon appareil photo » à des commandes contextuelles plus avancées telles que « lire le podcast que ma femme a envoyé l'autre jour ».

Certains des autres exemples qui défilaient en arrière-plan incluaient la suppression de sessions d'onglets spécifiques, la recherche puis l'application de modifications aux photos, l'ajout d'éléments aux notes et la lecture de musique.

Nous devrons attendre et voir comment cela se déroulera, mais sur la base des exemples d'Apple, nous sommes impatients de voir ce qui est possible. La variété des commandes était suffisamment variée pour nous enthousiasmer quant à leur potentiel. L'objectif ultime ici devrait être de donner suffisamment confiance à l'utilisateur pour qu'il n'hésite pas à essayer d'effectuer des tâches quotidiennes avec Apple Intelligence.

Si Apple parvient à y parvenir, cela pourrait être quelque chose de spécial.

Le contexte personnel est tout

La vraie différence entre la mise en œuvre d'Apple et quelque chose comme ChatGPT est que votre iPhone (ou iPad ou Mac) est au cœur de l'expérience. Votre appareil en sait déjà beaucoup sur vous : les personnes avec qui vous parlez, lorsque vous partez au travail, les lieux que vous fréquentez, etc.

En tirant parti de ce contexte, ces opérations basées sur l’IA deviennent personnelles. Ils deviennent beaucoup plus utiles et beaucoup plus pertinents. Si votre iPhone comprend qui est votre patron, quand vous lui parlez et quel type de ton est approprié, les réponses que vous générez dans un e-mail sont beaucoup plus utiles.

La recherche est un domaine dans lequel ce contexte peut s'avérer très utile. Avec Apple Intelligence, vous pouvez demander à Siri de trouver un lien provenant d'une personne que vous avez reçue la semaine dernière, que vous vous souveniez s'il s'agissait d'un e-mail ou d'un message. Vous pouvez faire apparaître des informations provenant de conversations que vous avez oublié de noter, comme une adresse ou l'heure à laquelle vous êtes censé vous rencontrer.

Siri peut utiliser toutes les informations de votre appareil que l'assistant connaît déjà. Quelques exemples incluent le contenu de votre boîte de réception, les fichiers que vous avez récemment enregistrés, les sujets des fils de discussion, les rappels que vous avez oubliés, les liens que vous avez partagés, les événements de calendrier à venir, les laissez-passer que vous avez ajoutés à l'application Wallet et bientôt.

La confidentialité est intégrée

L'autre gros problème avec la mise en œuvre d'Apple est l'accent mis par l'entreprise sur la confidentialité. Apple s'est positionnée comme une entreprise qui fait tout son possible pour respecter la vie privée des utilisateurs, et Apple Intelligence porte le flambeau. Beaucoup de ces demandes auront lieu entièrement sur l’appareil.

Pour les tâches qui nécessitent plus de puissance de traitement, le Private Cloud Compute d'Apple intervient. Votre appareil n'enverrait les données pertinentes aux serveurs d'Apple que lorsque cela est nécessaire. Ces données ne sont jamais stockées et ne sont censées jamais accessibles à Apple. Ces serveurs ont été construits par Apple en utilisant ses propres puces Apple Silicon spécifiquement pour Apple Intelligence.

Il reste à voir combien de ces requêtes peuvent être effectuées sur l'appareil. À mesure que les appareils deviennent plus puissants, il est probable que la majorité de ces opérations soient réalisées hors ligne à l’avenir. Apple mise entièrement sur l'IA à ce stade, alors attendez-vous à ce que les futures conceptions de puces donnent la priorité aux capacités d'Apple Intelligence.

ChatGPT intégré

Siri aura également une fenêtre sur ChatGPT 4o, qui arrivera « plus tard cette année » selon l'annonce de la WWDC. Apple affirme que les demandes adressées à ChatGPT ne seront pas enregistrées et que vous pourrez même connecter votre compte OpenAI pour accéder aux fonctionnalités premium si vous êtes abonné.

Lorsque Siri détecte que ChatGPT peut être en mesure de vous aider, il vous proposera d'envoyer votre demande ou votre image au service. Une fois que vous aurez donné votre autorisation, la demande sera traitée et vous recevrez une réponse. Vous pouvez même utiliser GPT 4o dans les outils d'écriture d'Apple pour générer du texte et utiliser DALL-E pour générer des images.

L'intégration de ChatGPT sera gratuite pour tous les utilisateurs d'Apple Intelligence.

Compatibilité Apple Intelligence

Malheureusement, Apple Intelligence nécessite un appareil Apple moderne comme l'iPhone 15 Pro (A17) ou un iPad ou un Mac doté d'un processeur M1. L’iPhone 16 et l’iPhone 16 Pro devraient être compatibles avec le service grâce à la prochaine puce A18.

Si Apple Intelligence a peut-être été l'annonce la plus importante de la WWDC 2024, Apple a également envoyé une onde de choc dans le monde entier avec l'annonce d'une application iPadOS Calculator.