Apple и OpenAI: союз, меняющий мир

На конференции разработчиков WWDC 2024 компания Apple анонсировала новый набор функций искусственного интеллекта под названием «Apple Intelligence», который будет доступен на iPhone, Mac и других устройствах. Уже этой осенью Apple планирует внедрить более разговорную версию Siri, кастомные ИИ-сгенерированные «Genmoji» и доступ к GPT-4o, позволяющий Siri обращаться к чат-боту OpenAI, когда она не может справиться с запросом пользователя.

Интеллектуальные возможности Apple

Apple заявила, что её ИИ-функции смогут выполнять действия в приложениях. Например, управление уведомлениями, автоматическое написание текстов или суммирование сообщений в почте и других приложениях. ИИ сможет взаимодействовать с несколькими приложениями, выполняя действия по запросу, например, воспроизведение подкаста, отправленного вашим партнёром.

Все данные будут обрабатываться на устройстве для обеспечения конфиденциальности. Однако для использования этих функций потребуется чип A17 Pro или M-серии. Также будет использоваться «семантический индекс», который сможет извлекать персональные данные по мере необходимости и отображать их в разных приложениях.

Обработка данных в «Private Cloud»

Когда функции ИИ потребуют обработки в облаке, данные будут отправляться в «Private Cloud», и информация не будет храниться на серверах. Apple утверждает, что данные будут недоступны для неё, и независимые эксперты будут проверять эти заявления.

Siri с новыми возможностями

В iOS 18 пользователи смогут говорить с Siri более естественно и даже печатать запросы, а не только произносить их. Siri сможет выполнять различные действия в приложениях, такие как настройка отложенных текстовых сообщений и выполнение задач на основе контекста запроса.

Новая функция «осведомлённость о экране» позволит Siri взаимодействовать с контентом на экране. Например, можно будет попросить Siri улучшить фотографию или отправить её другу. Siri сможет искать ваши фотографии и извлекать информацию, такую как номер водительского удостоверения, для заполнения веб-форм.

Письменные предложения и генерирование изображений

Apple также представила функции для написания электронных писем и резюмирования текста. В приложении Mail можно будет попросить Siri написать сообщение и изменить его тон. Эти функции будут доступны везде, где можно печатать.

Функция «Genmoji» позволит создавать реакции на лету с помощью ИИ, когда нужный эмодзи не найден. Появится и новая функция для генерации изображений — Image Playground, доступная в нескольких приложениях и через отдельное приложение. Разработчики смогут использовать API для интеграции Image Playground в свои устройства.

В приложении Photos улучшена возможность поиска объектов на фотографиях. Теперь можно будет искать, например, человека, делающего кувырки. Добавлены функции, аналогичные Magic Eraser от Google, для удаления объектов с фотографий.

Сотрудничество с OpenAI

ChatGPT, работающий на основе GPT-4o, будет доступен на iOS, macOS и iPadOS «позже в этом году» в виде чат-бота, к которому Siri сможет обращаться по мере необходимости. При этом Apple будет запрашивать разрешение у пользователя перед использованием чат-бота. В будущем Apple планирует поддерживать и другие модели ИИ.