Apple hat die erste Entwicklervorschau von iOS 18.2 veröffentlicht, die zahlreiche neue Funktionen von Apple Intelligence enthält. Eine der neuen Funktionen ist die lang erwartete Integration von ChatGPT. Damit können Sie Siri jetzt nach detaillierten Informationen zu Inhalten fragen, die auf Ihrem Gerätebildschirm angezeigt werden.
Durch die Integration von ChatGPT in Siri kann Apples virtueller Assistent komplexe Fragen mithilfe der OpenAI-Plattform beantworten. Er kann aber auch den Inhalt auf dem Bildschirm Ihres iPhones, iPads oder Macs lesen. Wenn Sie beispielsweise ein Video ansehen oder sich auf Instagram ein Foto ansehen, können Sie Fragen wie „Wo ist das?“ oder „Was ist das für ein Gebäude auf dem Foto?“ stellen.
Quelle: 9to5mac
Siri macht einen Screenshot und lädt ihn auf ChatGPT hoch, das den Kontext versteht und mithilfe seiner Datenbank Antworten liefert. Aus Datenschutzgründen fragt Siri natürlich immer um Ihre Erlaubnis, bevor ein Screenshot Ihres Geräts gemacht und an ChatGPT gesendet wird.
Besonders interessant ist diese Funktion für alle, die kein iPhone 16 besitzen, da das iPhone 16 bisher das einzige Gerät ist, das über Visual Intelligence verfügt. Mit dieser Funktion können Benutzer die „Kamerasteuerung“ drücken, um Informationen zu dem zu erhalten, was sie durch die Kamera sehen. Visual Intelligence nutzt Apple Intelligence, ChatGPT und Google, um Antworten zu liefern.
Apple entwickelt auch eine eigene bildschirmbezogene Funktion mithilfe des Apple Intelligence Sprachmodells. Diese Funktion wird jedoch mit einem weiteren Update von iOS 18 erscheinen – wahrscheinlich im nächsten Jahr. Sobald diese Funktion verfügbar ist, wird Siri den Kontext verstehen und basierend auf dem Bildschirminhalt handeln – die gesamte Verarbeitung erfolgt auf dem Gerät.
Quelle: 9to5mac
Neben der ChatGPT-Integration enthält iOS 18.2 auch Image Playground, Genmoji und eine neu gestaltete Mail-App.
Derzeit ist die iOS 18.2 Beta nur für Geräte verfügbar, die mit Apple Intelligence kompatibel sind. Das bedeutet iPhone 15 Pro oder höher und M1 iPad oder höher. Natürlich wird dieses Update letztendlich auch für andere Geräte verfügbar sein.
Apple hatte zuvor angedeutet, dass iOS 18.2 im Dezember für die Öffentlichkeit veröffentlicht werden soll. iOS 18.1 wird nächste Woche veröffentlicht und enthält Apples intelligentes Schreibwerkzeug sowie Benachrichtigungs- und Textzusammenfassungen.