На конференции WWDC 2024 компания Apple представила масштабное обновление своих операционных систем, центральным элементом которого стала Apple Intelligence — система персонального интеллекта, интегрированная в iPhone, iPad и Mac. В отличие от существующих облачных чат-ботов, Apple делает ставку на глубокое понимание контекста пользователя, локальную обработку данных и беспрецедентный уровень приватности при взаимодействии с искусственным интеллектом.
🧠 Apple Intelligence: персональный контекст и функциональность 0:00
Основой новой стратегии Apple является создание ИИ, который понимает личные данные пользователя, не нарушая их конфиденциальность . Apple Intelligence не просто генерирует текст, а оперирует информацией из разных приложений, чтобы упростить повседневные задачи .
Ключевые возможности системы включают:
- Приоритизация уведомлений: система анализирует содержание входящих сообщений и почты, поднимая наиболее важные (например, о необходимости забрать ребенка из детского сада) в верхнюю часть списка и сворачивая менее существенные .
- Инструменты для работы с текстом (Writing Tools): доступны на уровне всей системы (в Mail, Notes, Keynote и сторонних приложениях). Они позволяют переписывать текст в разных стилях, проверять грамматику и создавать краткие резюме (tldr) .
- Генерация изображений: Apple представила концепцию «Image Playground», позволяющую создавать оригинальные изображения в стилях эскиза, иллюстрации или анимации прямо внутри приложений .
- Понимание личного контекста: ИИ способен сопоставлять данные из разных источников. Например, если у пользователя переносится встреча, система может проверить календарь, найти информацию о школьном спектакле дочери в письмах, рассчитать время в пути с учетом пробок и ответить, успеет ли владелец устройства на мероприятие .
🛡️ Архитектура приватности: Private Cloud Compute 1:55
Одним из главных вызовов для Apple стало совмещение мощных моделей ИИ с защитой данных. По словам представителей компании, Apple Intelligence осведомлена о личных данных, но не собирает их .
Технологический стек безопасности базируется на двух уровнях:
- On-device Processing: большинство запросов обрабатываются локально на процессорах Apple Silicon .
- Private Cloud Compute: если задача требует больших мощностей, система обращается к облачным серверам Apple. При этом на сервер отправляются только данные, необходимые для конкретной задачи. Информация никогда не сохраняется, а независимые эксперты могут проверить программный код серверов на соответствие обещаниям о приватности .
🎙️ Новая эра Siri и интеграция с ChatGPT 2:37
Спустя 13 лет после запуска Siri получила фундаментальное обновление. Визуально это выражается в новом интерфейсе: теперь во время работы ассистента края экрана подсвечиваются мягким светом .
Обновленная Siri стала более «человечной»: она понимает запинки и исправления в речи (например, если пользователь перепутал название места в середине фразы) и сохраняет контекст диалога от запроса к запросу . В ближайший год Siri получит функцию «экранной осведомленности», что позволит ей видеть, что происходит в открытом приложении, и выполнять сложные команды . К примеру, можно попросить Siri «сделать это фото ярче» и затем «добавить его в заметку к биографии Стейси» — помощник сам переключится между Photos и Notes .
Когда Siri сталкивается с задачей, требующей широких мировых знаний, она может предложить обратиться к внешним моделям. Первым партнером Apple стала компания OpenAI :
- Интеграция с GPT-4o будет доступна бесплатно и без необходимости создания аккаунта .
- Запросы пользователей не будут логироваться (сохраняться) OpenAI .
- Платные подписчики ChatGPT смогут привязать свои аккаунты для доступа к расширенным функциям.
- Apple намерена в будущем добавить поддержку и других моделей ИИ .
📸 Визуальное творчество: Genmoji и Image Wand 6:13
Apple существенно расширила возможности работы с графикой, сделав упор на персонализацию. Одной из самых ярких новинок стали Genmoji — возможность генерировать новые эмодзи прямо с клавиатуры по текстовому описанию . Поскольку система знает лица из медиатеки пользователя, она может создать Genmoji, похожее на конкретного друга или родственника .
Для работы в приложении «Заметки» (Notes) представлен инструмент Image Wand (Изобразительная палочка). Если пользователь сделал грубый набросок стилусом Apple Pencil, Image Wand может превратить его в законченную иллюстрацию, анализируя контекст окружающего текста . Также система позволяет обвести пустое место рядом с текстом, и ИИ предложит релевантное изображение, подходящее по смыслу написанного .
📑 Улучшение продуктивности и мультимедиа 8:32
Обновления коснулись и стандартных приложений для работы с контентом:
- Фото: новый инструмент Cleanup (Очистка) на базе ИИ позволяет удалять лишние объекты с заднего плана, не изменяя основной предмет съемки . Поиск по видео теперь позволяет находить конкретные моменты внутри клипов по описанию действий .
- Воспоминания: пользователи могут создать фильм-воспоминание, просто описав сюжет. ИИ сам подберет лучшие кадры, распределит их по главам и наложит музыку .
- Аудио: в заметках и телефонных звонках появилась функция записи с последующей транскрибацией и созданием резюме . При записи телефонного разговора все участники будут автоматически уведомлены об этом .
Система Apple Intelligence будет доступна бесплатно в составе iOS 18, iPadOS 18 и macOS Sequoia, начиная с осени 2024 года .
