Alyona Polunina

Apple Intelligence — платформа искусственного интеллекта, разработанная компанией Apple Inc[2]. Технология, основанная на сочетании обработки данных как на самом устройстве, так и в ИИ-облаке, где большие ИИ-модели развёрнуты в дата-центре, была анонсирована 10 июня 2024 года на конференции WWDC 2024 в качестве функции операционных систем iOS 18, iPadOS 18 и macOS Sequoia, которые были анонсированы вместе с Apple Intelligence. Apple Intelligence включает в себя интеграцию с ChatGPT и будет бесплатной для всех пользователей с поддерживаемыми устройствами. Запуск бета-версии для разработчиков запланирован на конец 2024 года[3].

Облачная инфраструктура

Для работы, поддержки и развития Apple Intelligence компания Apple создала собственную инфраструктуру ИИ-кластеров, и заново сформировала новую команду специалистов по инфраструктуре и облачным технологиям Apple Cloud, которую возглавил Сумит Гупта (Sumit Gupta) — один из бывших руководителей Google[4].

Для безопасного ИИ-облака Apple использует кастомные серверы на процессорах собственной разработки серии Apple M и собственную серверную ОС, основанную на macOS[5][6]. Плюс для своих ИИ-облаков Apple разрабатывает собственные серверные ИИ-ускорители[7]. Но Apple пока не хватает собственной облачной ИИ-инфраструктуры для Apple Intelligence, поэтому компания также использует ИИ-кластеры Google Cloud[8]. Для обучения своих ИИ-моделей Apple Intelligence компания также использует Google Cloud с тензорными процессорами Google TPU[9][10].

Функциональные особенности

Инструменты редактирования текста

Apple Intelligence предлагает инструменты для написания текстов на базе искусственного интеллекта, включая функции изменения тона повествования и поиска ошибок. Эти функции помогают упростить работу пользователей с текстом, делая его более понятным, кратким и профессиональным. Эти инструменты также можно использовать для выделения основной мысли, ключевых моментов, форматирования таблиц и списков из статьи или письменного текста. GPT-4o доступен как дополнительный инструмент для написания текстов.

Image Playground

Данное приложение (загружается отдельно из AppStore) можно использовать для генерации изображений, используя ресурсы устройства. Image Playground можно использовать для создания изображений, используя фразы и короткие описания. Приложение так же предлагает несколько готовых тем (диско, фантазия, любовь), костюмов (астронавт, фермер, робот, супергерой), аксессуаров (берет, шарф, солнечные очки), и мест (город, пустыня, стадион). Можно так же выбрать стиль конечно изображения: анимация или иллюстрация. Через приложение «Заметки» на iPad, macOS и iPhone пользователи могут получить доступ к Image Playground с помощью инструмента Image Wand в палитре Apple Pencil, не открывая приложение Image Playground. Черновые наброски, сделанные с помощью Apple Pencil, можно преобразовать в изображения.

Genmoji

Пользователи могут сгенерировать уникальные эмодзи, не входящие в стандартный набор Unicode, по короткому описанию, используя возможности генеративных моделей «Genmoji». Пользователи могут выбирать людей на фотографиях, которых были распознанны в приложении «Фото», и создавать похожие на них изображения Genmoji. Подобно эмодзи, Genmoji можно добавить в форме текстовые сообщения, реакции или стикера и использовать в приложении «Сообщения», а также в сторонних приложениях в виде встроенных сообщений или стикеров.

Улучшенная Siri

Siri, виртуальный ассистент Apple, получил дополнительные возможностями, которые стали возможны благодаря Apple Intelligence. Новая версия получила обновленный интерфейс и анимацию, улучшенную обработку естественного языка и возможность взаимодействия с текстом с помощью двойного нажатия на главную панель без включения функции в меню специальных возможностей или двойного нажатия клавиши command в macOS. В более позднем обновлении Apple Intelligence добавит в Siri возможность использовать личный контекст действий на устройстве для ответа на запросы.

Приложение Почта

Apple Intelligence добавляет в приложение «Почта» функцию «Приоритетные сообщения», которая отображает срочные письма, такие как приглашения на тот же день или посадочные талоны, с кратким изложением, сгенерированным искусственным интеллектом. Приложение «Почта» также получает возможность разделить письма по таким категориям как «основные», «транзакции», «обновления» и «рекламные акции» на основе того, что содержится в письме. Данные вычисления, по утверждению Apple, выполняется непосредственно на устройстве.

Приложение Фото

Приложение Apple «Фото» включает в себя функцию создания пользовательских видеороликов-воспоминаний и расширяет возможности поиска. Пользователи теперь могут описать историю и, используя Apple Intelligence, выбрать для неё подходящие фотографии, видео и музыку. Пользователи теперь могут удалить отвлекающие элементы на фотографиях, используя инструмент Clean Up в приложении «Фото». Apple Intelligence способна распознать фоновые объекты и удалить их через касание или обводку. Кроме того, пользователи могут искать конкретные фотографии или видео по описанию и/или ключевым словам, а Apple Intelligence может точно определить конкретные моменты в видеоклипах.

Уведомления

Используя функцию сводки уведомлений, Apple Intelligence может суммировать уведомления из приложений для обмена сообщениями и группы уведомлений из приложений, чтобы пользователям не приходилось просматривать большое количество уведомлений. Новый режим фокусировки «Уменьшить количество прерываний» отключает уведомления, которые считаются неважными, и оставляет важные.

Визуальный интеллект

На iPhone 16 и 16 Pro или более поздних версиях iPhone, где доступен контроллер камеры, пользователи могут нажать и удерживать кнопку управления камерой чтобы сфотографировать объект, а затем отправить его в ChatGPT или выполнить поиск с помощью Google. Полученное изображение не сохраняется на вашем устройстве, и так же не отправляется на сервера компании, по утверждению Apple. Это сделано для того, чтобы пользователи могли быстрее узнавать больше об окружающих их объектах.

Интеграция с ChatGPT

В результате партнерства компании с OpenAI, Apple Intelligence также получила глубокую интеграцию с ChatGPT, позволяя Siri определить, когда стоит отправить сложный запрос пользователя ChatGPT. Эта глубокая интеграция основана на GPT-4o. Интеграция с ChatGPT поддерживается по умолчанию, при этом пользователь уведомляется перед отправкой каких-либо данных или фотографий на серверы ChatGPT, а IP-адреса скрываются при отправке запросов на серверы OpenAI.[28] Использование функций ChatGPT бесплатно для всех пользователей без необходимости входа в систему, однако они будут получать только ограниченное количество запросов GPT-4o до перехода на менее мощный GPT. Платные подписчики могут войти в систему, чтобы получить доступ к платным функциям по всей системе, включая большее число запросов с использованием GPT-4о. В будущем Apple планирует интегрировать в систему другие модели, такие как Gemini от Google.

Поддерживаемые устройства

Все компьютеры Mac и iPad с процессорами Apple silicon серии M будут поддерживать Apple Intelligence с выходом macOS Sequoia и iPadOS 18. iPhone, оснащённые, по крайней мере, A17 Pro или более поздней версией, также будут поддерживаться с выходом iOS 18[11]. Аналитик Минг-Чи Куо предполагает, что требования Apple к оперативной памяти будут снижены. Модель «на устройстве» запрещает запуск Apple Intelligence на более ранних моделях iPhone.

Mac

  • MacBook Air (M1, 2020) и новее
  • MacBook Pro (M1, 2020) и новее
  • Mac mini (M1, 2020) и новее
  • Mac Pro (M2 Ultra, 2023)
  • Mac Studio (M1 Pro, 2022) и новее
  • iMac (M1, 2021) и новее

iPad

  • iPad Air (5th generation) и новее
  • iPad Pro (5th generation) и новее
  • iPad mini (A17 Pro, 7th generation, 2024) и новее

iPhone

Примечания

  1. Apple releases iOS 18.1 developer beta with the first ‘Apple Intelligence’ iPhone features — 2024.
  2. Staff, Verge. Live blog: Apple’s AI plans, iOS 18, and more at WWDC 2024 (англ.). The Verge (10 июня 2024). Дата обращения: 16 июня 2024. Архивировано 11 июня 2024 года.
  3. Apple Intelligence Preview (амер. англ.). Apple. Дата обращения: 16 июня 2024. Архивировано 13 июня 2024 года.
  4. Apple наняла создателя ИИ-кластеров Google, обслуживающих Gemini и Bard (рус.). ServerNews.ru (28 апреля 2024). Дата обращения: 10 октября 2024. Архивировано 24 июня 2024 года.
  5. Bloomberg: Apple начала оснащать свои ЦОД серверами с чипами M2 Ultra для поддержки ИИ-функций iOS (рус.). ServerNews.ru (10 мая 2024). Дата обращения: 10 октября 2024. Архивировано 14 мая 2024 года.
  6. Apple создала кастомные серверы и ОС для безопасного ИИ-облака (рус.). ServerNews.ru (11 июня 2024). Дата обращения: 10 октября 2024. Архивировано 16 июля 2024 года.
  7. Apple работает над собственными серверными ИИ-ускорителями (рус.). ServerNews.ru (7 мая 2024). Дата обращения: 10 октября 2024. Архивировано 27 ноября 2024 года.
  8. Облачный союз: Apple использует ИИ-инфраструктуру Google Cloud для Apple Intelligence (рус.). ServerNews.ru (23 июня 2024). Дата обращения: 10 октября 2024. Архивировано 28 августа 2024 года.
  9. Apple использовала чипы Google для обучения моделей ИИ. Сигнал о поиске альтернатив Nvidia? (рус.). iXBT.com (30 июля 2024). Дата обращения: 10 октября 2024. Архивировано 10 августа 2024 года.
  10. Google показала системы с собственными TPU, на которых обучаются ИИ-модели Gemini и Apple Intelligence (рус.). 3DNews. (23 августа 2024). Дата обращения: 10 октября 2024. Архивировано 3 октября 2024 года.
  11. published, David Nield. Apple Intelligence: here's a full list of the iPhones, iPads and Macs that'll get Apple’s new AI powers (англ.). TechRadar (11 июня 2024). Дата обращения: 16 июня 2024. Архивировано 11 июня 2024 года.

Ссылки

No tags for this post.