Функции Apple Intelligence: подробно о важном

Apple Intelligence — искусственный интеллект от Купертино. Эти возможности впервые были анонсированы на конференции WWDC в июне 2024 года. Первая волна функций появилась с выходом iOS 18.1, iPadOS 18.1 и macOS Sequoia 15.1. Последующие обновления iOS 18.2, iPadOS 18.2 и macOS Sequoia 15.2 добавили еще больше возможностей. Однако Apple планирует выпустить оставшиеся функции Apple Intelligence в 2025 году. А он уже скоро.

Новые функции искусственного интеллекта от Apple

Письменные инструменты

1. Коррекция текста: ии от Епл помогает исправлять орфографические и грамматические ошибки, а также улучшать выбор слов и структуру текста. Все изменения можно принять одним нажатием или изучить каждое из них с объяснением. Очень полезно.

2. Рерайт текста: этот функционал позволяет переделать текст, сохраняя его основной смысл, но меняя тон на дружелюбный, профессиональный (строгий) и лаконичный.

3. Главное из текст: выделив текст, можно получить его краткую версию. Функция поддерживает создание абзацев, извлечение ключевых моментов, составление списков и таблиц. Эти возможности интегрированы в приложения, такие как Почта и Сообщения.

4. Изменить стиль письма: в iOS 18.2 появилась возможность описать, какие изменения вы хотите внести в текст, и выбрать определенный стиль или настроение письма.

5. Создание текста с помощью ИИ: в iOS 18.2 функция "Составить" позволяет Siri, используя интеграцию с ChatGPT, создавать текст с нуля, а не просто редактировать существующий.

Все вышеуказанные функции доступны на устройствах iPhone, iPad и Mac, что делает технику епл универсальным инструментом для работы с текстом.

Новые функции Siri

1. Дизайн: при активации Сири на экране устройства появляется световое кольцо, которое реагирует на ваш голос. Это позволяет визуально понять, когда Siri вас слушает, не отвлекаясь от других задач.

2. Ввод запросов текстом: теперь можно вводить команды для Сири, используя интерфейс "Введите в Siri". На iPhone и iPad это активируется двойным нажатием в нижней части экрана, а на Mac — двойным нажатием клавиши Command. Siri предлагает варианты запросов, чтобы ускорить процесс.

3. Контекстные ответы: сири стала лучше понимать последовательные запросы. Например, если вы спросите о температуре в Киеве, а затем уточните: «Какая влажность?», Siri поймет, что речь идет о том же городе.

4. Максимальная точность: если вы случайно оговорились или изменили свою формулировку в процессе разговора, Siri корректно обработает ваш запрос.

5. Глубокая интеграция с устройством: сири может ответить на вопросы о функциях устройства, помочь с настройками и даже найти нужные параметры с использованием естественного языка.

ИИ от Епл и обновления Siri показывают, как искусственный интеллект может быть нужным инструментом в повседневной жизни, делая работу с текстом и голосовыми командами проще и удобнее.

Mail

1. Почтовый сервис теперь предлагает кнопку для быстрого обобщения содержания любых входящих писем. Вместо нескольких первых строк вы увидите краткую сводку прямо в списке входящих сообщений. Если письмо помечено как срочное, оно будет автоматически перемещено в верхнюю часть почтового ящика, чтобы вы сразу заметили важные сообщения.

2. Функция Smart Reply предоставляет готовые варианты ответов на электронные письма. Эти предложения формируются на основе контекста самого письма, что позволяет экономить время.

Кроме того, несколько уведомлений о новых письмах теперь отображаются на экране блокировки в виде краткого обобщения, чтобы вы могли понять содержание, не открывая приложение.

Сообщения

1. Приложение «Сообщения» также оснащено функцией Smart Reply, которая анализирует текст входящих сообщений и предлагает подходящие варианты ответа. Уведомления о нескольких сообщениях теперь группируются и суммируются на экране блокировки, чтобы избежать лишней информации.

Кроме того, вы можете использовать функционал прямо в приложении «Сообщения» для проверки текста и его редактирования перед отправкой.  

Фото

1. Создание фильмов из фотографий стало еще проще. Просто опишите идею, например: «Мой кот в 2024 году» или «Отпуск в Орландо». Приложение автоматически подберет соответствующие фотографии и добавит музыку. Вы можете изменить готовый фильм, используя функцию Memory Mixes, чтобы выбрать определенное настроение или добавить конкретные сцены и изображения, которые должны быть включены.

2. Функция поиска на основе естественного языка позволяет находить фото и видео с помощью простых запросов. Например, вы можете написать: «Эрик на роликах в зеленой одежде», и приложение найдет нужные изображения. Поиск также умеет находить отдельные моменты в видеороликах, а умные подсказки помогут сузить параметры и быстрее получить нужный результат.

3. Удалние объектов на фото

В приложении «Фото» появилась функция «Очистка», которая помогает легко удалять ненужные элементы с изображений. Этот инструмент автоматически распознает объекты, которые могут показаться лишними, но вы также можете самостоятельно выбирать элементы, касаясь их, обводя или используя кисть.

При увеличении изображения можно использовать пальцы для более точного удаления мелких дефектов или пятен. Инструмент достаточно умный, чтобы не затронуть основные объекты, такие как люди, даже если случайно выделить их.

Функция «Очистка» поддерживает все изображения в вашей библиотеке, включая старые снимки и фото, сделанные другими устройствами, такими как DSLR или компактные камеры.

Транскрипция и резюме

Приложения, такие как Notes, теперь позволяют записывать аудио с последующей расшифровкой. Вместе со стенограммой создается краткое резюме, что особенно полезно для лекций или других длительных записей. Хотя сама функция транскрипции не является частью Apple Intelligence, создание резюме полностью поддерживается этим инструментом.

Режимы фокусировки

Новый режим фокусировки «Уменьшить прерывания» позволяет видеть только важные уведомления, фильтруя остальное. Эта настройка удобна для сосредоточенной работы или отдыха.

При редактировании существующего режима фокусировки или создании нового теперь можно включить опцию интеллектуального управления уведомлениями. Она позволяет пропускать только действительно важные сообщения, отключая все остальное. Вы также можете настроить исключения для определенных приложений и контактов, как это работало до обновления iOS 18.1.

Сводки уведомлений

Теперь уведомления группируются в удобные сводки, чтобы вы могли быстро просмотреть, что нового в каждом приложении, без необходимости открывать их.

Эти обновления делают использование вашего устройства еще более удобным, упрощая работу с фотографиями, аудио и уведомлениями.

Запись телефонных разговоров

С появлением iOS 18.1 пользователи получили возможность записывать телефонные звонки и автоматически создавать их текстовую расшифровку. Хотя сама функция транскрипции не относится к Apple Intelligence, использование этой технологии для создания краткого резюме из расшифровки является её частью.

Чтобы начать запись разговора, нажмите кнопку записи, расположенную в верхнем левом углу экрана во время звонка. Перед началом все участники уведомляются о записи. Записанные звонки сохраняются в приложении «Заметки», где можно просмотреть полную стенограмму и краткое резюме.

Safari

При чтении статьи в режиме чтения Safari теперь предлагает возможность обобщить её содержание с помощью Apple Intelligence. Это упрощает восприятие длинных текстов и позволяет быстро выделить ключевые моменты.

Интеграция Siri и ChatGPT

С iOS появилась интеграция Siri с ChatGPT от OpenAI. По умолчанию эта функция отключена, но её можно активировать в настройках Apple Intelligence и Siri.

Когда ChatGPT включён, Siri использует его для сложных запросов. Например, ChatGPT может помочь:
- Создать текст или изображение с нуля.
- Предложить рецепты, основываясь на продуктах в холодильнике.
- Описать объект на фотографии.

Чтобы инициировать запрос, можно использовать команду вроде: «Попроси ChatGPT предложить рецепт печенья с шоколадной крошкой». Siri проверяет запрос, чтобы определить, нужен ли ChatGPT, но пользователь может отключить это подтверждение в настройках.

Для использования ChatGPT не требуется создавать учётную запись, и это бесплатно. Если вы входите в свою платную учётную запись OpenAI, она может сохранять ваши запросы. Apple, в свою очередь, не хранит данные о взаимодействии с ChatGPT.

Эта интеграция также доступна в инструментах Writing Tools и Visual Intelligence. Writing Tools используют ChatGPT для создания текстов, а Visual Intelligence — для анализа изображений.

Визуальный интеллект

Визуальный интеллект — новая функция, доступная начиная с iPhone 16. Она активируется через кнопку управления камерой. При долгом нажатии открывается режим, позволяющий использовать камеру для анализа окружения.

Направив камеру на магазин, вы можете получить информацию о его рейтинге и времени работы. Если сфотографируете объект, можно узнать больше о нём с помощью ChatGPT или поиска Гугл. Например, Google может помочь найти похожие товары для покупки.

Есть еще функционал в визуальном интелекте:
- Чтение текста с изображения вголос.
- Обнаружение номеров телефонов и адресов для добавления в контакты.
- Копирование текста или создание его краткой сводки.

Эти функции делают работу с устройством более интуитивной и удобной.

Письменные инструменты

В iOS 18.1 появились инструменты для работы с текстом, но в iOS 18.2 их функционал стал еще шире. Теперь пользователи могут задавать тон своему тексту, изменяя его стиль по своему усмотрению. Если вы хотите, чтобы текст стал более выразительным, сложным или даже был преобразован в стихотворную форму, Writing Tools сделает это возможным.

Кроме того, в iOS 18.2 инструменты письма интегрированы с ChatGPT. Это значит, что вы можете не только редактировать существующий текст, но и создавать его с нуля, используя ChatGPT.

Будущие функции Apple Intelligence

Некоторые новые возможности Apple Intelligence запланированы на 2025 год и будут добавлены с последующими обновлениями iOS 18.

Приоритетные уведомления

Система уведомлений станет более удобной благодаря функции приоритизации. Важные уведомления будут автоматически перемещаться в верхнюю часть списка, чтобы вы могли сразу обратить на них внимание.

Siri

Обновления Siri начались с iOS 18.1, где появилось визуальное свечение на краях экрана, указывающее, когда Siri вас слушает. С выходом iOS 18.2 добавлена интеграция с ChatGPT. Однако для появления новых функций Siri, таких как «осведомленность на экране» и «личный контекст», потребуется дождаться обновлений iOS 18.3 и iOS 18.4.

- Осведомленность на экране: сиои сможет взаимодействовать с тем, что отображается на вашем экране. Например, вы можете посмотреть фотографию и сказать: «Отправь это изображение Эрику», и Siri выполнит ваш запрос.

- Личный контекст: сири может работать с вашими личными данными, к примеру,  сообщениями и электронными письмами, при этом вся обработка будет происходить только на устройстве. Это дает возможность быстрого поиска конкретного сообщения или фотографии, которые вы сделали в определённое время.

- Более широкие действия между приложениями: сири получит возможность управлять функциями внутри приложений и взаимодействовать с ними. Вы сможете, например, перемещать файлы между разными приложениями или управлять сторонними приложениями через голосовые команды.

Эти изменения сделают Siri более умной, гибкой и интегрированной в вашу повседневную работу с устройством.