Apple récidive : voici les fonctionnalités impressionnantes d'Apple Intelligence

La conférence Apple était ennuyeuse jusqu'à ce qu'Apple commence à parler du système Apple Intelligence. Des fonctionnalités étonnantes et une étape incroyable vers un avenir différent. Apple Intelligence est un système d'intelligence personnelle pour les appareils iPhone, iPad et Mac qui combine la puissance des modèles génératifs et les intègre. avec un contexte personnel pour fournir une intelligence caractérisée par un niveau incroyable de... Avantage et commodité.

Apple Intelligence sera profondément intégré à iOS 18, iPadOS 18 et macOS Sequoia, et exploitera la puissance du silicium Apple pour comprendre et créer du langage et des images, entreprendre des actions dans les applications et extraire des données à partir d'informations personnelles, pour accélérer et simplifier le quotidien. Tâches. Tout cela en établissant une nouvelle norme en matière de confidentialité dans le monde de l'intelligence artificielle en introduisant un nouveau type de serveur appelé Private Cloud Compute, avec la capacité de fournir la puissance de calcul requise entre le traitement sur l'appareil et des modèles plus grands basés sur des serveurs dédiés exécutant Chips de pomme.

Nouvelles capacités à comprendre et à créer un langage

Apple Intelligence lance de nouvelles façons permettant aux utilisateurs d'écrire et de communiquer plus efficacement. Les utilisateurs attendent la toute nouvelle fonctionnalité Outils d'écriture sur l'ensemble du système, afin de pouvoir réécrire, relire et résumer des textes où ils le souhaitent, y compris dans les applications Mail, Notes et Pages, ainsi que dans les applications externes.

Quelles que soient les tâches d'écriture, qu'il s'agisse d'organiser des notes de cours, de relire un article de blog ou de s'assurer qu'un e-mail est parfaitement rédigé, les utilisateurs se sentiront plus en confiance dans leur écriture grâce aux outils d'écriture. Avec l'outil Rewrite, Apple Intelligence permettra aux utilisateurs de choisir parmi différentes versions de ce qu'ils ont écrit et d'ajuster le style pour atteindre ce qui convient au public visé et à la tâche à accomplir. L'outil Rewrite permet également de présenter le bon article au bon endroit, d'aider à affiner une lettre de motivation et d'ajouter de l'humour et de la créativité à une invitation à une fête. L'outil de relecture vérifie que les règles de grammaire sont respectées, que les mots appropriés sont choisis et que les phrases sont correctement structurées, tout en proposant des suggestions de modifications, accompagnées d'une explication de ces modifications afin que l'utilisateur puisse les réviser ou les accepter rapidement. L'outil Résumer permet aux utilisateurs de sélectionner du texte et de le résumer dans un paragraphe facile à lire, une forme à puces pour les points clés, un tableau ou une liste.

Dans l'application Mail, vous ne manquerez jamais d'e-mails. Messages prioritaires introduit une nouvelle section en haut de votre boîte de réception où sont affichés vos e-mails les plus urgents, comme une invitation à un dîner le jour même ou une carte d'embarquement pour un avion.

Grâce à la boîte de réception d'un utilisateur, au lieu d'afficher les premières lignes de chaque e-mail, les utilisateurs peuvent afficher des résumés sans avoir à ouvrir le message. Quant aux longs fils de discussion, les utilisateurs peuvent afficher les détails pertinents en un seul clic. La fonction Smart Reply fournit également des suggestions de réponses rapides et identifie les questions dans l'e-mail pour garantir qu'elles reçoivent toutes une réponse.

La compréhension approfondie du langage s’étend aux notifications. Les notifications prioritaires apparaissent en haut de la pile de notifications pour mettre en évidence les plus importantes, et les résumés aident les utilisateurs à parcourir rapidement les notifications longues ou encombrées, affichant les détails clés directement sur l'écran de verrouillage, comme ce qui se passe dans les discussions de groupe actives.

Quant à la nouvelle fonctionnalité de concentration (Réduire les interruptions), elle aide les utilisateurs à se concentrer lors de l'exécution de tâches, en mettant en évidence uniquement les notifications qui nécessitent une attention immédiate, comme les messages texte liés à la réception des enfants de la garderie.

Les utilisateurs peuvent désormais enregistrer, transcrire et résumer des clips audio dans les applications Notes et Téléphone. Lorsque vous commencez à enregistrer un appelLes participants sont automatiquement avertis et, une fois l'opération terminée, Apple Intelligence crée un résumé pour les aider à mémoriser les points les plus importants.

Enfin, enregistrez les appels sur iPhone

Fonctionnalité de terrain de jeu d’images

Apple Intelligence prend en charge des fonctionnalités passionnantes de création d’images qui aident les utilisateurs à communiquer et à s’exprimer de nouvelles manières. Avec Image Playground, les utilisateurs peuvent créer des images amusantes en quelques secondes, en choisissant parmi trois styles : Animation, Illustration ou Esquisse.

La fonctionnalité Image Playground est très simple à utiliser car elle est intégrée aux applications dont la messagerie, et est également disponible dans une application dédiée, et est idéale pour tester différents concepts et styles. Toutes les images sont créées sur l'appareil, donnant aux utilisateurs la liberté de tester cette fonctionnalité avec autant d'images qu'ils le souhaitent.

Image Playground permet aux utilisateurs de choisir parmi une gamme de concepts appartenant à diverses catégories telles que des thèmes, des tenues, des accessoires et des lieux, de rédiger une description pour définir l'image, de choisir une personne dans leur propre bibliothèque d'images à inclure dans l'image et de choisir leur style préféré.

L'expérience Image Playground dans Messages donne aux utilisateurs la possibilité de créer rapidement des photos amusantes pour leurs amis et même de voir des suggestions de concepts de personnages pertinents pour leurs conversations. Par exemple, si un utilisateur envoie un message à un groupe concernant une randonnée, des suggestions de concepts liés aux amis, à la destination et à l'activité lui seront proposées, ce qui rendra la création d'images plus rapide et plus pertinente.

Les utilisateurs de Notes peuvent accéder à la fonctionnalité Image Playground via le nouveau widget Image Wand dans la palette d'outils Apple Pencil, ajoutant ainsi plus d'attrait visuel aux notes. Les diagrammes de priorités peuvent également être transformés en images colorées, et les utilisateurs peuvent sélectionner un espace vide pour créer une image en utilisant le contexte de la zone environnante. Image Playground est également disponible dans des applications telles que Keynote, Free Space et Pages, ainsi que dans des applications tierces prenant en charge la nouvelle API Image Playground.

Création de codes Genmoji

Emoji bénéficiera d'une toute nouvelle mise à niveau, car les utilisateurs pourront créer des Genmoji originaux pour s'exprimer. En écrivant simplement une description montrant le Genmoji ainsi que des options supplémentaires, les utilisateurs peuvent également créer des Genmojis pour leurs amis et leur famille en utilisant leurs photos. Les codes Genmoji peuvent être ajoutés aux messages ou partagés sous forme d'autocollant ou de code de réponse interactif, tout comme les codes emoji.

Les nouveautés en images

La recherche de photos et de vidéos est devenue plus facile avec Apple Intelligence, le langage naturel peut donc être utilisé pour rechercher des photos spécifiques, comme « Maya patinant dans une chemise tie-dye » ou « Katy avec des autocollants sur son visage ». Quant à la recherche dans les vidéos, elle est également devenue plus puissante avec la possibilité de retrouver des moments spécifiques dans les clips afin que les utilisateurs puissent accéder directement à la partie en question. De plus, le nouvel outil Clean Up peut identifier et supprimer les éléments gênants en arrière-plan d'une image, sans remplacer accidentellement l'élément dans l'image.

Memories permet aux utilisateurs de créer l'histoire qu'ils souhaitent voir simplement en écrivant une description. En comprenant le langage et l'image, Apple Intelligence sera en mesure de sélectionner les meilleures photos et vidéos en fonction de la description, créant ainsi une histoire composée de chapitres basés sur des thèmes. inspiré par les images, il l'arrange pour présenter un film avec sa propre courbe narrative. Comme pour toutes les fonctionnalités Apple Intelligence, les photos et vidéos restent privées sur l'appareil et ne sont pas partagées avec Apple ou qui que ce soit d'autre.

Siri entre dans une nouvelle ère

Avec des capacités de compréhension du langage plus riches, Siri devient plus naturel, offrant des suggestions plus personnalisées et contextuelles, ainsi que la capacité de simplifier et d'accélérer les tâches quotidiennes. Il peut détecter si un locuteur bégaie et peut maintenir le contexte d'une requête à l'autre. suivant. De plus, les utilisateurs peuvent écrire à Siri et basculer entre le texte et la voix lorsqu'ils communiquent avec lui en fonction de ce qu'ils préfèrent à ce moment-là. Dans ce contexte, Siri présente un tout nouveau design avec une élégante lumière rougeoyante qui s'enroule autour du bord de l'écran lorsque Siri est actif.

Siri peut désormais fournir aux utilisateurs une assistance complète sur leurs appareils, répondant à des milliers de questions sur la façon de faire avancer les choses. Les utilisateurs peuvent tout apprendre, depuis la planification des e-mails dans l'application Mail jusqu'à la manière de passer du mode clair au mode sombre.

En étant conscient de ce qui se passe sur les écrans des appareils, Siri sera, au fil du temps, capable de comprendre et d'agir sur le contenu des utilisateurs dans davantage d'applications. Par exemple, si un ami envoie sa nouvelle adresse dans l'application Messages, le destinataire peut dire : "Ajoutez cette adresse à votre carte de contact".

Grâce à Apple Intelligence, Siri aura la possibilité d'effectuer des centaines de nouvelles actions sur et entre les appareils Apple et les applications tierces. Par exemple, un utilisateur peut dire : "Reprenez cet article sur les cigales dans votre liste de lecture" ou ". Envoyez à Malia des photos d'un barbecue samedi », et Siri effectuera cette action.

Siri aura la capacité de fournir des informations adaptées à l'utilisateur et aux informations sur son appareil. Par exemple, un utilisateur pourra dire « Lisez le podcast recommandé par Jimmy » et Siri identifiera et lira les épisodes sans que l'utilisateur ait à se rappeler si. la recommandation a été mentionnée dans un SMS ou un e-mail. Ou demander : « Quand arrivera l’avion de ma mère ? Siri trouvera les détails du vol et s'appuiera sur eux pour suivre le vol en temps réel et répondre à l'heure d'arrivée.

Une nouvelle norme en matière de confidentialité dans l’intelligence artificielle

Apple Intelligence s'appuie sur une compréhension approfondie du contexte personnel tout en préservant la confidentialité pour offrir de grands avantages. Le traitement sur l'appareil constitue le fondement d'Apple Intelligence, et de nombreux modèles qui le prennent en charge fonctionnent entièrement sur l'appareil. Pour répondre à des demandes opérationnelles plus complexes qui nécessitent plus de puissance de traitement, Private Cloud Compute étend la confidentialité et la sécurité des appareils Apple dans le cloud pour fournir encore plus d'intelligence.

Private Cloud Compute permet à Apple Intelligence d'exposer et d'étendre sa puissance de calcul et d'exploiter des modèles basés sur des serveurs plus vastes pour des requêtes plus complexes. Ces modèles fonctionnent sur des serveurs alimentés par Apple Silicon, de sorte que les données liées à la tâche de l'utilisateur ne sont traitées que sur les serveurs d'Apple et ne sont ni stockées ni rendues accessibles à Apple.

Intégration de ChatGPT dans les plateformes Apple

Apple intègre ChatGPT dans les expériences iOS 18, iPadOS 18 et macOS Sequoia, permettant aux utilisateurs d'accéder à son expertise, ainsi qu'à ses capacités de compréhension d'images et de documents, sans avoir à naviguer dans plusieurs outils.

Siri peut également tirer parti de l'expertise de ChatGPT lorsque cela est utile. Avant d'envoyer une question à ChatGPT, les utilisateurs sont alertés, accompagnés de tout document ou photo, et Siri fournira alors directement la réponse.

De plus, ChatGPT sera disponible dans les outils d'écriture d'Apple à l'échelle du système, aidant ainsi les utilisateurs à créer du contenu pour tout ce sur quoi ils écrivent. L'outil de création permet également aux utilisateurs d'accéder aux outils d'image de ChatGPT pour créer des images dans un large éventail de genres pour compléter ce qu'ils écrivent.

Il existe une protection de confidentialité intégrée pour les utilisateurs accédant à ChatGPT, car leurs adresses IP sont masquées et OpenAI ne stocke pas les demandes. Les politiques d'utilisation des données de ChatGPT s'appliquent aux utilisateurs qui choisissent de lier leurs comptes.

ChatGPT arrivera pour iOS 18, iPadOS 18 et macOS Sequoia plus tard cette année, avec le support de GPT-4o. Les utilisateurs peuvent accéder au service gratuitement sans avoir à créer de compte, et les abonnés ChatGPT peuvent lier leurs comptes et accéder directement aux fonctionnalités payantes. de ces expériences.

Disponibilité

Apple Intelligence est gratuit pour les utilisateurs et sera disponible en version bêta sur iOS 18, iPadOS 18 et macOS Sequoia cet automne en anglais (États-Unis). Des fonctionnalités, plates-formes logicielles et langues supplémentaires seront disponibles au cours de l'année prochaine. Le système Apple Intelligence sera disponible sur les appareils iPhone 15 Pro, iPhone 15 Pro Max, iPad et Mac équipés de la puce M1 et versions ultérieures, avec la nécessité de définir Siri et la langue de l'appareil sur l'anglais (États-Unis).