О функциях Audio Intelligence на Apple Watch Series 12 и Apple Watch Ultra 4

Audio Intelligence — это совершенно новый класс функций Apple Intelligence, который использует микрофоны Apple Watch, мощность чипа Apple, а также модели ИИ на устройстве и в облаке, для распознавания звуков и музыки, а также для того, чтобы вы могли оставаться включенными в происходящее, — и всё это при неизменной защите вашей конфиденциальности на каждом этапе. Audio Intelligence включает распознавание звуков, автоматическое распознавание музыки с помощью Shazam, Live Rewind и Siri Recap.

Live Rewind и Siri Recap будут доступны в бета-версии позже в этом году, сначала на английском языке. Более подробная информация будет доступна при запуске.

Возможности функций Audio Intelligence

Audio Intelligence на Apple Watch опирается на тесную интеграцию аппаратного и программного обеспечения с новейшими моделями искусственного интеллекта, обеспечивая работу четырех новых функций.

Всё под вашим контролем

Каждая функция Audio Intelligence доступна по желанию. А функции Live Rewind и Siri Recap позволяют вам самим решать, когда и где они будут активны.

• Распознавание звуков можно включить в приложении «Настройки» на iPhone. Откройте приложение «Настройки» на iPhone, затем нажмите «Универсальный доступ», затем «Распознавание звука и имени», затем «Распознавание звуков» и включите «Определять с помощью Apple Watch». Если на iPhone уже включено распознавание звуков, оно автоматически включится на Apple Watch.

• Shazam можно включить в приложении «Настройки» на Apple Watch. Откройте приложение «Настройки» на Apple Watch, нажмите смарт-стопку, а затем включите «Распознавание музыки» или нажмите виджет «Распознавание музыки», когда он появится в смарт-стопке. Если на Apple Watch уже включено распознавание музыки, включать его повторно не нужно.

• Live Rewind активируется только при намеренном двойном нажатии колесика Digital Crown. Он показывает только последние 15 секунд речи в виде фрагмента текста на дисплее. Расшифровка не продолжается в фоновом режиме, и текст не сохраняется, если только вы не решите спросить Siri о содержании или сохранить его в приложении Siri. Функцию можно включить через приложение Watch на iPhone — просто откройте приложение Watch, нажмите Siri, затем Live Rewind и включите «Двойное нажатие Digital Crown».

• Siri Recap запускается, только если вы выберете этот параметр. Siri Recap можно включить в приложении Watch на iPhone. При включении можно задать расписание по времени и/или местоположению (например «только на работе» или «никогда ночью») либо включать и выключать функцию вручную. При любом из этих вариантов можно в любой момент включить или выключить эту функцию в Центре управления.

• Ваши данные остаются вашими. Вы можете в любой момент просматривать, редактировать и удалять сводки Siri Recap в приложении Siri, включая любые фрагменты текста из функции Live Rewind, которые вы решили сохранить. Удаление одной сводки удаляет её со всех синхронизированных устройств. Можно также экспортировать сводки и фрагменты текста в другие приложения, включая «Заметки», «Дневник» и другие.

• Только вы можете получить доступ к своим сводкам. Сводки Siri Recap и сохраненные фрагменты текста Live Rewind в приложении Siri шифруются сквозным шифрованием при синхронизации через iCloud, поэтому доступ к ним есть только у вас и только на доверенных устройствах.

Как функции Audio Intelligence защищают вашу конфиденциальность

Как и все наши продукты и функции, технология Audio Intelligence на Apple Watch была с самого начала разработана с учетом защиты вашей конфиденциальности.

• Аудио не записывается и не хранится. Функции Audio Intelligence не создают аудиозаписей. Ни операционная система, ни приложения, ни вы, ни даже Apple не могут получить доступ к аудио. Нечего передавать, пересылать или предоставлять по запросу любой стороны, потому что записи не существует.

• Необработанное аудио никогда не доступно. Аудио поступает в защищенный буфер внутри Secure Exclave чипа S11 — аппаратно изолированного отсека, встроенного в чип Apple Watch и iPhone, который обрабатывает данные датчиков отдельно от остальной части системы. Операционная система, приложения, вы и даже компания Apple не имеют доступа к данным, которые обрабатываются и анализируются в Secure Exclave. После обработки эти данные немедленно удаляются.

• Siri Recap и Live Rewind помогают освежить память, а не предоставляют подробную запись. Siri Recap создает не расшифровку, а краткую сводку высокого уровня — примерно как заметки, которые можно сделать после разговора. Live Rewind показывает фрагмент текста того, что было сказано за последние 15 секунд, чтобы можно было наверстать упущенное.

• Ваши данные недоступны компании Apple. В функции Siri Recap базовые модели Apple, работающие на Private Cloud Compute (PCC), обобщают информацию и формируют итоговый результат. Данные в PCC никогда не сохраняются и не доступны Apple или кому-либо еще. Они используются только для выполнения запроса, и независимые эксперты по безопасности могут в любое время проверить это обещание.

• Ваши данные будут автоматически удалены, если вы не предпримете никаких действий. Сводки Siri Recap автоматически удаляются через 7 дней, если их не сохранить или не экспортировать. 15-секундные текстовые фрагменты функции Live Rewind безвозвратно исчезают с Apple Watch примерно через 30 секунд после того, как дисплей часов гаснет, если только вы не сохраните их в приложении Siri или не нажмете «Спросите Siri».

• Ваши данные синхронизируются через iCloud со сквозным шифрованием. Если использовать iCloud с двухфакторной аутентификацией и код-пароль устройства, любые сводки Siri Recap или фрагменты текста Live Rewind, которые вы решите сохранить, будут синхронизироваться на ваших устройствах в приложении Siri со сквозным шифрованием. Доступ к этой информации есть только у вас и только на устройствах, на которых вы выполнили вход в iCloud. Apple не хранит ключи шифрования. Никто другой, даже компания Apple, не может получить доступ к данным со сквозным шифрованием, которые вы сохранили в приложении Siri.

Как функции Audio Intelligence защищают конфиденциальность окружающих

Эти функции предназначены для защиты не только вашей конфиденциальности, но и конфиденциальности людей поблизости.

• Говорящий не указывается. Функции Audio Intelligence не предназначены для идентификации и распознавания говорящих. Функция Siri Recap может содержать имена, если они упоминались в ходе разговора, однако она не указывает напрямую, кому именно принадлежат слова (например, не пишет «Джон сказал...» и не обозначает участников как «Говорящий А» и «Говорящий Б»). Аналогично, Live Rewind может дословно расшифровывать сказанное, но не указывает, кому принадлежат цитаты.

• Звуковые и визуальные сигналы для функции Live Rewind. При активации динамик Apple Watch издает звуковой сигнал, даже если часы находятся в беззвучном режиме или к ним подключены наушники. На дисплее отображаются полноэкранная анимация и индикатор микрофона, а для активации функции Live Rewind требуется отчётливо выполнить двойное нажатие. Это нужно, чтобы предупредить находящихся поблизости о том, что функция активирована.

• Опущенный контент. Сводки Siri Recap разработаны таким образом, чтобы исключать потенциально вредный контент (например, высказывания, пропагандирующие причинение вреда самому себе, или язык вражды) и конфиденциальную информацию (такую ​​как финансовые данные, государственные идентификаторы, данные для аутентификации и определенные персональные идентификаторы).

• Будьте внимательны к окружающим. Хотя аудио не записывается и не сохраняется, а говорящие не указываются, подумайте о тех, кто находится рядом, если разговор может быть приватным или конфиденциальным.

Как ваши данные обрабатываются Audio Intelligence

Конфиденциальность заложена в основу Apple Watch — начиная с самого чипа и заканчивая слаженным взаимодействием аппаратного и программного обеспечения. Хотя разные функции Audio Intelligence по-разному обрабатывают ваши данные, одно остается неизменным: компания Apple не имеет к ним доступа.

• Аудио защищено на аппаратном уровне. Все четыре функции работают благодаря новому чипу S11 в Apple Watch и Secure Exclave — специальному защищенному буферу, который обрабатывает аудио в изолированной среде, недоступной никому, даже Apple.

• Shazam передает только акустический отпечаток. Если открыть смарт-стопку на Apple Watch и музыка будет обнаружена, Secure Exclave обработает аудио в защищённом буфере и создаст акустический отпечаток этой песни (компактное представление, которое невозможно преобразовать обратно в исходное аудио). Именно этот отпечаток, а не необработанное аудио, затем отправляется на серверы Shazam для определения песни.

• Данные для функций «Распознавание звука» и Live Rewind обрабатываются на устройстве. Вся обработка, включая распознавание речи, выполняется на Apple Watch и iPhone. Если вы решите спросить Siri о содержании текстового фрагмента Live Rewind или сохранить его в приложении Siri, он будет безопасно передан в Private Cloud Compute.

• Функция Siri Recap использует Private Cloud Compute. Secure Exclave на Apple Watch шифрует обнаруженное аудио и передает его в Secure Exclave на сопряженном iPhone. Затем зашифрованное аудио расшифровывается, преобразуется в текст и сжимается в Secure Exclave на iPhone. Чтобы создать сводку, Siri Recap отправляет с iPhone в Private Cloud Compute зашифрованную, сокращенную версию разговора. Этот сокращенный текст, объем которого составляет менее половины от оригинальной версии, передает самую суть состоявшейся беседы. Элементы, характерные для разговорной речи, второстепенные фразы, слова-паразиты и избыточные повторы удаляются, при этом затронутые темы сохраняются. Этот сокращенный текст отправляется в PCC вместе с некоторой контекстной информацией для создания сводки. Готовая текстовая сводка шифруется и отправляется из Private Cloud Compute обратно на iPhone и Apple Watch.

• Синхронизация с iCloud со сквозным шифрованием. Сводки Siri Recap сохраненные фрагменты текста из функции Live Rewind хранятся в приложении Siri на вкладке «Сводки»; они защищены сквозным шифрованием и синхронизируются через iCloud.

• Всё это — в рамках аппаратной и программной архитектуры Apple. Функции Audio Intelligence построены на базе тесно интегрированной архитектуры, в которой данные обрабатываются исключительно на самом устройстве и с использованием технологии Private Cloud Compute.

Что вам понадобится

Распознавание звука и автоматическое распознавание музыки с помощью Shazam

• Apple Watch Series 12, Apple Watch Ultra 4

• iPhone 11 или более поздней модели либо iPhone SE (2-го поколения или более поздней модели) с iOS 27

Live Rewind и Siri Recap

Эти функции будут доступны в бета-версии позже в этом году.

• Apple Watch Series 12, Apple Watch Ultra 4

• iPhone 16, iPhone 16 Plus, iPhone 16 Pro, iPhone 16 Pro Max, iPhone 17, iPhone 17e, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 18 Pro, iPhone 18 Pro Max или iPhone Duo

• Требуется Apple Intelligence и Siri AI (бета-версия)²

• Функции Live Rewind и Siri Recap недоступны для пользователей младше 13 лет. Для пользователей младше 18 лет с учетной записью ребенка доступ к функциям Live Rewind и Siri Recap должен быть включен родителем или опекуном.

• Доступно на английском языке, другие языки появятся позже

Дополнительная информация

• Обзор конфиденциальности Audio Intelligence

• Узнайте больше о Private Cloud Compute