О функциях Audio Intelligence на Apple Watch Series 12 и Apple Watch Ultra 4
Audio Intelligence — это совершенно новый класс функций Apple Intelligence, который использует микрофоны Apple Watch, мощность чипа Apple, а также модели ИИ на устройстве и в облаке, для распознавания звуков и музыки, а также для того, чтобы вы могли оставаться включенными в происходящее, — и всё это при неизменной защите вашей конфиденциальности на каждом этапе. Audio Intelligence включает распознавание звуков, автоматическое распознавание музыки с помощью функций Shazam, «Перемотка эфира назад» и «Обзор от Siri».
Бета-версии функций «Перемотка эфира назад» и «Обзор от Siri» будут доступны позже в этом году, сначала на английском языке. Более подробная информация будет доступна при запуске.
Возможности функций Audio Intelligence
Audio Intelligence на Apple Watch опирается на тесную интеграцию аппаратного и программного обеспечения с новейшими моделями искусственного интеллекта, обеспечивая работу четырех новых функций.
Распознавание звуков
«Распознавание звуков» обнаруживает важные звуки, такие как сирены, будильники и дверные звонки, и уведомляет вас, даже если iPhone нет рядом. Это особенно полезно для глухих и слабослышащих людей.
Распознавание музыки
«Распознавание музыки» с помощью Shazam автоматически определяет песню, звучащую на фоне, и отображает название и имя исполнителя в смарт-стопке без нажатия на виджет.
Перемотка эфира назад
Перемотка эфира назад1 позволяет вспомнить, что было сказано за последние 15 секунд: при двойном нажатии на колесико Digital Crown на экране Apple Watch отображается фрагмент текста, благодаря чему можно уловить упущенную или незнакомую информацию. Можно спросить Siri о содержимом фрагмента или просто сохранить его в приложении Siri.
Обзор от Siri
Функция «Обзор от Siri»1 в фоновом режиме фиксирует содержание ваших разговоров в течение дня и создает краткие сводки (сгенерированные с помощью Apple Intelligence), к которым можно вернуться позже, чтобы освежить память, не отвлекаясь при этом от происходящего в моменте. Ваши сводки автоматически удаляются через 7 дней, если вы решите не сохранить их.
Всё под вашим контролем
Каждая функция Audio Intelligence доступна по желанию. А функции «Перемотка эфира назад» и «Обзор от Siri» позволяют вам самим решать, когда и где они будут активны.
Распознавание звуков можно включить в приложении «Настройки» на iPhone. Откройте приложение «Настройки» на iPhone, затем нажмите «Универсальный доступ», затем «Распознавание звука и имени», затем «Распознавание звуков» и включите «Распознавание с Apple Watch». Если на iPhone уже включено распознавание звуков, оно автоматически включится на Apple Watch.
Shazam можно включить в приложении «Настройки» на Apple Watch. Откройте приложение «Настройки» на Apple Watch, нажмите смарт-стопку, а затем включите «Распознавание музыки» или нажмите виджет «Распознавание музыки», когда он появится в смарт-стопке. Если на Apple Watch уже включено распознавание музыки, включать его повторно не нужно.
Перемотка эфира назад активируется только при намеренном двойном нажатии колесика Digital Crown. Он показывает только последние 15 секунд речи в виде фрагмента текста на дисплее. Расшифровка не продолжается в фоновом режиме, и текст не сохраняется, если только вы не решите спросить Siri о содержании или сохранить его в приложении Siri. Функцию можно включить через приложение Watch на iPhone — просто откройте приложение Watch, нажмите Siri, затем «Перемотка эфира назад» и включите «Двойное нажатие Digital Crown».
Обзор от Siri запускается, только если вы выберете этот параметр. Функцию «Обзор от Siri» можно включить в приложении Watch на iPhone. При включении можно задать расписание по времени и/или местоположению (например «только на работе» или «никогда ночью») либо включать и выключать функцию вручную. При любом из этих вариантов можно в любой момент включить или выключить эту функцию в Центре управления.
Ваши данные остаются вашими. Вы можете в любой момент просматривать, редактировать и удалять обзоры от Siri в приложении Siri, включая любые фрагменты текста из функции «Перемотка эфира назад», которые вы решили сохранить. Удаление одной сводки удаляет её со всех синхронизированных устройств. Можно также экспортировать сводки и фрагменты текста в другие приложения, включая «Заметки», «Дневник» и другие.
Только вы можете получить доступ к своим сводкам. Обзоры от Siri и сохраненные фрагменты текста из функции «Перемотка эфира назад» в приложении Siri шифруются сквозным шифрованием при синхронизации через iCloud, поэтому доступ к ним есть только у вас и только на доверенных устройствах.
Как функции Audio Intelligence защищают вашу конфиденциальность
Как и все наши продукты и функции, технология Audio Intelligence на Apple Watch была с самого начала разработана с учетом защиты вашей конфиденциальности.
Функция «Обзор от Siri» создает краткую общую сводку, а не подробную запись или расшифровку.
Аудио не записывается и не хранится. Функции Audio Intelligence не создают аудиозаписей. Ни операционная система, ни приложения, ни вы, ни даже Apple не могут получить доступ к аудио. Нечего передавать, пересылать или предоставлять по запросу любой стороны, потому что записи не существует.
Необработанное аудио никогда не доступно. Аудио поступает в защищенный буфер внутри Secure Exclave чипа S11 — аппаратно изолированного отсека, встроенного в чип Apple Watch и iPhone, который обрабатывает данные датчиков отдельно от остальной части системы. Операционная система, приложения, вы и даже компания Apple не имеют доступа к данным, которые обрабатываются и анализируются в Secure Exclave. После обработки эти данные немедленно удаляются.
Функции «Обзор от Siri» и «Перемотка эфира назад» помогают освежить память, а не предоставляют подробную запись. Функция «Обзор от Siri» создает не расшифровку, а краткую сводку высокого уровня — примерно как заметки, которые можно сделать после разговора. Перемотка эфира назад показывает фрагмент текста того, что было сказано за последние 15 секунд, чтобы можно было наверстать упущенное.
Ваши данные недоступны компании Apple. В функции «Обзор от Siri» базовые модели Apple, работающие на Private Cloud Compute (PCC), обобщают информацию и формируют итоговый результат. Данные в PCC никогда не сохраняются и не доступны Apple или кому-либо еще. Они используются только для выполнения запроса, и независимые эксперты по безопасности могут в любое время проверить это обещание.
Ваши данные будут автоматически удалены, если вы не предпримете никаких действий. Обзоры от Siri автоматически удаляются через 7 дней, если их не сохранить или не экспортировать. 15-секундные текстовые фрагменты функции «Перемотка эфира назад» безвозвратно исчезают с Apple Watch примерно через 30 секунд после того, как дисплей часов гаснет, если только вы не сохраните их в приложении Siri или не нажмете «Спросите Siri».
Ваши данные синхронизируются через iCloud со сквозным шифрованием. Если использовать iCloud с двухфакторной аутентификацией и код-пароль устройства, любые обзоры от Siri или фрагменты текста из функции «Перемотка эфира назад», которые вы решите сохранить, будут синхронизироваться на ваших устройствах в приложении Siri со сквозным шифрованием. Доступ к этой информации есть только у вас и только на устройствах, на которых вы выполнили вход в iCloud. Apple не хранит ключи шифрования. Никто другой, даже компания Apple, не может получить доступ к данным со сквозным шифрованием, которые вы сохранили в приложении Siri.
Как функции Audio Intelligence защищают конфиденциальность окружающих
Эти функции предназначены для защиты не только вашей конфиденциальности, но и конфиденциальности людей поблизости.
Функция «Обзор от Siri» не распознает говорящих и не указывает, кому принадлежат реплики, в своих общих сводках.
Говорящий не указывается. Функции Audio Intelligence не предназначены для идентификации и распознавания говорящих. Функция «Обзор от Siri» может содержать имена, если они упоминались в ходе разговора, однако она не указывает напрямую, кому именно принадлежат слова (например, не пишет «Джон сказал...» и не обозначает участников как «Говорящий А» и «Говорящий Б»). Аналогично, функция «Перемотка эфира назад» может дословно расшифровывать сказанное, но не указывает, кому принадлежат цитаты.
Звуковые и визуальные сигналы для функции «Перемотка эфира назад». При активации динамик Apple Watch издает звуковой сигнал, даже если часы находятся в беззвучном режиме или к ним подключены наушники. На дисплее отображаются полноэкранная анимация и индикатор микрофона, а для активации функции «Перемотка эфира назад» требуется отчётливо выполнить двойное нажатие. Это нужно, чтобы предупредить находящихся поблизости о том, что функция активирована.
Опущенный контент. Обзоры от Siri разработаны таким образом, чтобы исключать потенциально вредный контент (например, высказывания, пропагандирующие причинение вреда самому себе, или язык вражды) и конфиденциальную информацию (такую как финансовые данные, государственные идентификаторы, данные для аутентификации и определенные персональные идентификаторы).
Будьте внимательны к окружающим. Хотя аудио не записывается и не сохраняется, а говорящие не указываются, подумайте о тех, кто находится рядом, если разговор может быть приватным или конфиденциальным.
Как ваши данные обрабатываются Audio Intelligence
Конфиденциальность заложена в основу Apple Watch — начиная с самого чипа и заканчивая слаженным взаимодействием аппаратного и программного обеспечения. Хотя разные функции Audio Intelligence по-разному обрабатывают ваши данные, одно остается неизменным: компания Apple не имеет к ним доступа.
Обзоры от Siri хранятся на вкладке «Обзоры» в приложении Siri и защищены сквозным шифрованием при синхронизации с iCloud.
Аудио защищено на аппаратном уровне. Все четыре функции работают благодаря новому чипу S11 в Apple Watch и Secure Exclave — специальному защищенному буферу, который обрабатывает аудио в изолированной среде, недоступной никому, даже Apple.
Shazam передает только акустический отпечаток. Если открыть смарт-стопку на Apple Watch и музыка будет обнаружена, Secure Exclave обработает аудио в защищённом буфере и создаст акустический отпечаток этой песни (компактное представление, которое невозможно преобразовать обратно в исходное аудио). Именно этот отпечаток, а не необработанное аудио, затем отправляется на серверы Shazam для определения песни.
Данные функций «Распознавание звука» и «Перемотка эфира назад» обрабатываются на устройстве. Вся обработка, включая распознавание речи, выполняется на Apple Watch и iPhone. Если вы решите спросить Siri о содержании текстового фрагмента из функции «Перемотка эфира назад» или сохранить его в приложении Siri, он будет безопасно передан в Private Cloud Compute.
Функция «Обзор от Siri» использует Private Cloud Compute. Secure Exclave на Apple Watch шифрует обнаруженное аудио и передает его в Secure Exclave на сопряженном iPhone. Затем зашифрованное аудио расшифровывается, преобразуется в текст и сжимается в Secure Exclave на iPhone. Чтобы создать сводку, функция «Обзор от Siri» отправляет с iPhone в Private Cloud Compute зашифрованную, сокращенную версию разговора. Этот сокращенный текст, объем которого составляет менее половины от оригинальной версии, передает самую суть состоявшейся беседы. Элементы, характерные для разговорной речи, второстепенные фразы, слова-паразиты и избыточные повторы удаляются, при этом затронутые темы сохраняются. Этот сокращенный текст отправляется в PCC вместе с некоторой контекстной информацией для создания сводки. Готовая текстовая сводка шифруется и отправляется из Private Cloud Compute обратно на iPhone и Apple Watch.
Синхронизация с iCloud со сквозным шифрованием. Обзоры от Siri и сохраненные фрагменты текста из функции «Перемотка эфира назад» хранятся в приложении Siri на вкладке «Сводки»; они защищены сквозным шифрованием и синхронизируются через iCloud.
Всё это — в рамках аппаратной и программной архитектуры Apple. Функции Audio Intelligence построены на базе тесно интегрированной архитектуры, в которой данные обрабатываются исключительно на самом устройстве и с использованием технологии Private Cloud Compute.
Что вам понадобится
Распознавание звука и автоматическое распознавание музыки с помощью Shazam
Для подключения требуется поддерживаемая модель Apple Watch, создавшая пару с поддерживаемой моделью iPhone:
Apple Watch Series 12, Apple Watch Ultra 4
iPhone 11 или более поздней модели либо iPhone SE (2-го поколения или более поздней модели) с iOS 27
Функции «Перемотка эфира назад» и «Обзор от Siri»
Эти функции будут доступны в бета-версии позже в этом году.
Для подключения требуется поддерживаемая модель Apple Watch, создавшая пару с поддерживаемой моделью iPhone:
Apple Watch Series 12, Apple Watch Ultra 4
iPhone 16, iPhone 16 Plus, iPhone 16 Pro, iPhone 16 Pro Max, iPhone 17, iPhone 17e, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 18 Pro, iPhone 18 Pro Max, iPhone Duo
Требуется Apple Intelligence и Siri AI (бета-версия)2
Функции «Перемотка эфира назад» и «Обзор от Siri» недоступны для пользователей младше 13 лет. Для пользователей младше 18 лет с учетной записью ребенка доступ к функциям «Перемотка эфира назад» и «Обзор от Siri» должен быть включен родителем или опекуном.
Доступно на английском языке, другие языки появятся позже
Дополнительная информация
Обзоры от Siri и текстовые фрагменты из функции «Перемотка эфира назад» создаются с помощью Apple Intelligence и могут быть неполными или неточными. Важные детали могут быть опущены, неправильно поняты или неверно обобщены. Если точность имеет значение, подтвердите важную информацию у участников разговора или из другого надежного источника. Функция «Обзор от Siri» ограничивает доступ к определенным видам потенциально конфиденциальной информации — например, финансовым данным, государственным идентификаторам и т. д., — однако автоматическая фильтрация может не удалять все конфиденциальные сведения.
Наша новейшая версия Siri, Siri AI, будет постепенно разворачиваться в бета-версии. Бета-версия Siri AI станет доступна позже в этом году. Для неё требуется устройство с поддержкой Apple Intelligence, на котором выбран поддерживаемый язык. Siri AI изначально не будет доступна в ЕС на iOS, iPadOS и watchOS.