Apple a publié la première version bêta d'iOS 18.2 pour les développeurs, incluant de nombreuses nouvelles fonctionnalités d'Apple Intelligence. Parmi elles, l'intégration très attendue avec ChatGPT, permettant désormais de poser des questions à Siri sur le contenu affiché à l'écran.

Grâce à l'intégration de ChatGPT à Siri, l'assistant virtuel d'Apple utilisera la plateforme OpenAI pour répondre à des questions complexes. Mais il pourra aussi lire le contenu affiché sur l'écran de votre iPhone, iPad ou Mac. Par exemple, si vous regardez une vidéo ou une photo sur Instagram, vous pouvez demander : « Où est-ce ? » ou « Quel est ce bâtiment sur la photo ? »

QQ20241025-090648.png

Source : 9to5mac

Siri prendra une capture d'écran et l'enverra à ChatGPT, qui pourra comprendre le contexte et fournir une réponse grâce à sa base de données. Bien sûr, pour des raisons de confidentialité, Siri vous demandera toujours votre autorisation avant de prendre une capture d'écran et de l'envoyer à ChatGPT.

Cette fonctionnalité est particulièrement intéressante pour ceux qui ne possèdent pas d'iPhone 16, car c'est le seul appareil à bénéficier jusqu'à présent de l'Intelligence Visuelle. Avec cette fonctionnalité, les utilisateurs peuvent appuyer sur « contrôle caméra » pour obtenir des informations sur ce qu'ils voient à travers l'appareil photo. L'Intelligence Visuelle utilise Apple Intelligence, ChatGPT et Google pour fournir des réponses.

Apple développe également sa propre fonctionnalité de reconnaissance d'écran en utilisant le modèle linguistique Apple Intelligence. Cependant, cette fonctionnalité sera disponible avec une autre mise à jour d'iOS 18, probablement l'année prochaine. Une fois cette fonctionnalité disponible, Siri comprendra le contexte et agira en fonction du contenu à l'écran – le tout étant traité sur l'appareil.

QQ20241025-090806.png

Source : 9to5mac

Outre l'intégration de ChatGPT, iOS 18.2 inclut également Image Playground, Genmoji et une application Mail repensée.

Pour le moment, la version bêta d'iOS 18.2 est uniquement compatible avec les appareils compatibles Apple Intelligence. Cela signifie les iPhone 15 Pro ou supérieur et les iPad M1 ou supérieur. Bien sûr, cette mise à jour sera finalement disponible sur d'autres appareils.

Apple avait précédemment indiqué qu'iOS 18.2 serait disponible pour le public en décembre. iOS 18.1 sera publié la semaine prochaine, incluant l'outil d'écriture intelligente d'Apple ainsi que des résumés de notifications et de textes.