Еще до публичного выпуска iOS 18.1 компания Apple выпустила первую бета-версию iOS 18.2 для разработчиков, которая включает в себя множество новых функций Apple Intelligence. Одной из новых функций является долгожданная интеграция с ChatGPT, благодаря чему теперь вы можете запросить у Siri подробную информацию о том, что вы видите на экране вашего устройства.
Используйте Siri, чтобы спросить ChatGPT, что вы видите на экране.
Благодаря интеграции ChatGPT в Siri виртуальный помощник Apple будет использовать платформу OpenAI для ответа на сложные вопросы. Однако он также может читать то, что отображается на экране вашего iPhoneiPad или Mac. Например, если вы смотрите видео или просматриваете чью-то фотографию в Instagram, вы можете спросить что-то вроде «где это?» или «Что за здание на этой фотографии?»
Затем Siri сделает снимок экрана и загрузит его в ChatGPT, который сможет понять контекст и использовать свою базу данных для предоставления ответа. Конечно, из соображений конфиденциальности Siri всегда запрашивает разрешение, прежде чем сделать снимок экрана вашего устройства и отправить его в ChatGPT.
Эта функция особенно интересна для тех, у кого нет iPhone 16, которое на данный момент является единственным устройством, поддерживающим визуальный интеллект. Благодаря этой функции пользователи могут нажать «Управление камерой», чтобы получить информацию о том, что они видят на камере. Visual Intelligence использует Apple Intelligence, ChatGPT и Google чтобы дать ответы.
Если вы находитесь на iPhone 15 Pro или совместимого iPad, вы можете просто сделать фотографию, а затем задать Siri и ChatGPT все, что захотите.
Стоит отметить, что Apple также работает над собственной функцией экранной осведомленности, используя языковые модели Apple Intelligence. Однако эта функция появится в следующем обновлении iOS 18 — вероятно, в следующем году. Как только это станет доступно, Siri поймет контекст и предпримет действия в зависимости от того, что отображается на вашем экране – все это обрабатывается на устройстве.
Подробнее об iOS 18.2
Помимо интеграции ChatGPT, iOS 18.2 также включает в себя Image Playground, Genmoji и обновленное приложение «Почта».
На данный момент бета-версия iOS 18.2 доступна только для устройств, совместимых с Apple Intelligence. Это означает iPhone 15 Pro или новее, а также iPad M1 или новее. Конечно, со временем обновление будет доступно и для других устройств. Ранее Apple предполагала, что iOS 18.2 будет выпущена для широкой публики в декабре.
iOS 18.1 выйдет на следующей неделе с инструментами Apple Intelligence Writers и суммированием уведомлений и текста.
