Функції аудіоінтелекту на Apple Watch Series 12 і Apple Watch Ultra 4

Аудіоінтелект — це абсолютно новий клас функцій Apple Intelligence, які використовують мікрофони Apple Watch і можливості чипа Apple, а також моделі ШІ, що працюють як на пристрої, так і в хмарі, щоб допомогти вам виявляти звуки, розпізнавати музику та залишатись у курсі подій. Водночас вашу приватність захищено на кожному етапі. Аудіоінтелект включає в себе такі функції: «Розпізнавання звуків», автоматичне розпізнавання музики за допомогою Shazam, «Перемотування назад наживо» й Siri Recap.

Бета-версії функцій «Перемотування назад наживо» й Siri Recap будуть доступні пізніше цього року, спочатку лише англійською мовою. Докладніші відомості буде опубліковано під час запуску.

Можливості аудіоінтелекту

В основу аудіоінтелекту на Apple Watch покладено тісну інтеграцію обладнання та програмного забезпечення з новітніми моделями ШІ. Такий підхід дав змогу створити чотири нові функції.

Ви керуєте всім

Кожна функція аудіоінтелекту вмикається за бажанням користувача. А для «Перемотування назад наживо» й Siri Recap ви самі вирішуєте, коли та де кожна функція має бути активною.

• Функцію «Розпізнавання звуків» можна ввімкнути в програмі «Параметри» на iPhone. Відкрийте програму «Параметри» на iPhone, натисніть «Доступність», виберіть «Розпізнавання звуків та імен», натисніть «Розпізнавання звуків», після чого ввімкніть параметр Detect using Apple Watch (Розпізнавати за допомогою Apple Watch). Якщо функцію «Розпізнавання звуків» уже ввімкнено на iPhone, вона автоматично ввімкнеться на Apple Watch.

• Shazam можна ввімкнути в програмі «Параметри» на Apple Watch. Відкрийте програму «Параметри» на Apple Watch, натисніть «Динамічний стос» і ввімкніть параметр «Розпізнавання музики» (або торкніться віджета «Увімкніть виявлення музики», коли він відобразиться в динамічному стосі). Якщо функцію «Розпізнавання музики» вже ввімкнено на Apple Watch, її не потрібно вмикати повторно.

• Функція «Перемотування назад наживо» активується подвійним натисканням коліщатка Digital Crown. Вона показує лише останні 15 секунд розмови як текстовий фрагмент на дисплеї. Функція не продовжує транскрибувати розмову у фоновому режимі та не зберігає текст, доки ви не поставите Siri запитання щодо вмісту або не збережете текст у програмі Siri. Увімкнути функцію можна в програмі Watch на iPhone — просто відкрийте програму Watch, натисніть Siri, виберіть «Перемотування назад наживо» й увімкніть параметр «Подвійне натиснення коронки Digital Crown».

• Siri Recap запускається лише за вашим бажанням. Увімкнути Siri Recap можна в програмі Watch на iPhone. Активувавши її, ви зможете налаштувати розклад на основі часу та (або) місця (наприклад, «лише на роботі» чи «ніколи вночі») або вручну вмикати й вимикати її. Усі ці параметри можна в будь-який момент увімкнути або вимкнути в Центрі керування.

• Ваші дані лише ваші. Ви можете будь-коли переглядати, редагувати й видаляти узагальнення Siri Recap у програмі Siri, зокрема й текстові фрагменти, створені за допомогою функції «Перемотування назад наживо», які ви вирішили зберегти. Якщо видалити узагальнення, його буде вилучено з усіх ваших синхронізованих пристроїв. Ви також можете експортувати свої узагальнення і текстові фрагменти в інші програми, зокрема «Нотатки», «Щоденник» тощо.

• Доступ до узагальнень маєте лише ви. Узагальнення Siri Recap і текстові фрагменти, створені за допомогою функції «Перемотування назад наживо», які ви зберегли в програмі Siri, під час синхронізації через iCloud захищено наскрізним шифруванням, тож доступ до них маєте лише ви та лише на довірених пристроях.

Як функції аудіоінтелекту захищають вашу приватність

Як і всі наші продукти й функції, аудіоінтелект на Apple Watch захищає вашу приватність на кожному рівні.

• Аудіо не записується та не зберігається. Функції аудіоінтелекту не створюють аудіозаписів. Доступу до аудіо немає ні в операційної системи, ні в програм, ні навіть у компанії Apple. Запису, який можна поширити, переслати або надати на вимогу будь-якої сторони, не існує.

• Отримати доступ до необроблених звукових даних неможливо. Аудіо надходить у захищений буфер усередині Secure Exclave чипа S11 — апаратно ізольованого компонента, вбудованого в чип Apple Watch та iPhone, який обробляє дані датчиків окремо від решти системи. Доступу до даних, які обробляються та аналізуються в Secure Exclave, немає ні в операційної системи, ні в програм, ні у вас, ні навіть у компанії Apple. Після оброблення ці дані негайно видаляються.

• Функції Siri Recap і «Перемотування назад наживо» допомагають освіжити пам’ять, а не надають детальний запис. Siri Recap не створює стенограму. Вона створює короткий, узагальнений підсумок, подібний до нотаток, які ви могли б зробити після розмови. Функція «Перемотування назад наживо» відображає текстовий фрагмент зі сказаним протягом останніх 15 секунд, тож ви можете зрозуміти те, що пропустили.

• У компанії Apple немає доступу до ваших даних. Для Siri Recap фреймворк Apple Foundation Models, що працює на серверах функції «Приватні хмарні обчислення», підсумовує та форматує фінальний результат. Дані на цих серверах ніколи не зберігаються, а доступу до них немає ні в компанії Apple, ні в будь-кого іншого. Вони використовуються лише для виконання вашого запиту, а незалежні експерти з безпеки можуть будь-коли перевірити це зобов’язання.

• Ваші дані автоматично видаляються, якщо не вжити жодних дій. Узагальнення Siri Recap автоматично видаляються через 7 днів, якщо ви не збережете або не експортуєте їх. 15-секундні текстові фрагменти, створені за допомогою функції «Перемотування назад наживо», остаточно зникають з Apple Watch приблизно через 30 секунд після того, як дисплей Apple Watch тьмяніє, якщо ви не збережете їх у програмі Siri або не натиснете «Запити до Siri».

• Під час синхронізації з iCloud дані захищено наскрізним шифруванням. Якщо ви використовуєте iCloud із двофакторною автентифікацією, а пристрій захищено за допомогою коду допуску, будь-яке узагальнення Siri Recap або текстовий фрагмент, створений за допомогою функції «Перемотування назад наживо», який потрібно зберегти, синхронізується в зашифрованому вигляді між вашими пристроями в програмі Siri. Отримати доступ до цієї інформації можете тільки ви та лише на пристроях, де ви ввійшли в iCloud. Apple не зберігає ключі шифрування. Ніхто інший, навіть Apple, не може отримати доступ до даних із наскрізним шифруванням, які ви зберегли в програмі Siri.

Як функції аудіоінтелекту захищають приватність тих, хто перебуває поруч

Ці функції створено для захисту не лише вашої приватності, а й приватності тих, хто перебуває поруч.

• Відсутність ідентифікації мовців. За задумом функції аудіоінтелекту не ідентифікують мовців і не пов’язують висловлювання з ними. Узагальнення Siri Recap можуть містити імена, якщо їх згадували в розмові, але ця функція не пов’язує слова з мовцями безпосередньо (наприклад, «Іван сказав…» або позначки «Мовець А» й «Мовець Б»). Таким же чином функція «Перемотування назад наживо» може дослівно транскрибувати сказане кимось, але не пов’язує цитати з мовцями.

• Звукові й візуальні сигнали для функції «Перемотування назад наживо». Коли функція активується, з динаміка на Apple Watch лунає звуковий сигнал, навіть якщо на Apple Watch увімкнено беззвучний режим або до нього під’єднано навушники. На дисплеї з’являються анімація на весь екран та індикатор мікрофона, а для активації функції «Перемотування назад наживо» потрібно виконати чіткий жест подвійного натискання. Це потрібно, щоб сповістити людей поруч про те, що функцію активовано.

• Опускання вмісту. Функцію Siri Recap розроблено таким чином, щоб вона не включала потенційно шкідливий вміст, зокрема висловлювання, що пропагують самоушкодження або ненависть, а також конфіденційну інформацію, як-от фінансові дані, державні ідентифікатори, дані автентифікації та певні особисті ідентифікатори.

• Увага до людей, що вас оточують. Хоча аудіо не записується та не зберігається, а мовці не ідентифікуються, зважайте на людей, що вас оточують, якщо розмова має приватний або конфіденційний характер.

Як аудіоінтелект обробляє ваші дані

Питання приватності лежить у самій основі Apple Watch — у чипі пристрою, а обладнання та програмне забезпечення бездоганно працюють разом. Хоча різні функції аудіоінтелекту по-різному обробляють ваші дані, одне залишається незмінним — у компанії Apple немає доступу до жодних із них.

• Аудіо захищено на апаратному рівні. Роботу всіх чотирьох функцій забезпечує новий чип S11 на Apple Watch і Secure Exclave — спеціальний захищений буфер, який обробляє аудіо приватно в захищеному середовищі, до якого ніхто не має доступу, навіть Apple.

• Shazam передає лише акустичний підпис. Якщо ви відкриєте динамічний стос на Apple Watch і буде виявлено музику, Secure Exclave обробить аудіо в захищеному буфері й створить акустичний підпис цієї пісні (компактне представлення, яке неможливо відновити до початкового аудіо). Саме цей підпис, а не необроблене аудіо, потім надсилається на сервери Shazam, щоб визначити пісню.

• Дані функцій «Розпізнавання звуків» і «Перемотування назад наживо» обробляються на пристрої. Уся обробка, зокрема розпізнавання мовлення, відбувається на Apple Watch та iPhone. Якщо ви вирішите запитати Siri про вміст текстового фрагмента, створеного за допомогою функції «Перемотування назад наживо» або зберегти його в програмі Siri, його буде безпечно надіслано на сервер функції «Приватні хмарні обчислення».

• Siri Recap використовує Приватні хмарні обчислення. Secure Exclave на Apple Watch шифрує виявлене аудіо й передає його в Secure Exclave на об’єднаному в пару iPhone. Потім зашифроване аудіо розшифровується, перетворюється на текст і стискається в Secure Exclave на iPhone. Щоб створити узагальнення, Siri Recap надсилає зашифровану, скорочену версію стенограми розмови з iPhone на сервер функції «Приватні хмарні обчислення». Цей стиснений текст має бути менш ніж удвічі коротшим за оригінальну транскрипцію та передає основний зміст розмови. Вилучаються елементи, що натякають на тон розмови, другорядні вислови, слова-паразити й повтори, а теми обговорення зберігаються. Цей стиснений текст надсилається на сервер функції разом із деякою контекстною інформацією, щоб створити узагальнення. Готове текстове узагальнення шифрується та надсилається із сервера функції «Приватні хмарні обчислення» назад на iPhone і Apple Watch.

• Наскрізне шифрування даних під час синхронізації з iCloud. Узагальнення Siri Recap і збережені текстові фрагменти, створені за допомогою функції «Перемотування назад наживо» містяться в програмі Siri на вкладці «Підсумки» та синхронізуються з iCloud із наскрізним шифруванням.

• Усе відбувається в межах апаратної та програмної архітектури Apple. Функції аудіоінтелекту створено на основі тісно інтегрованої архітектури, у якій ваші дані обробляються лише на пристрої та за допомогою Приватних хмарних обчислень.

Що вам знадобиться

Функція «Розпізнавання звуків» і автоматичне розпізнавання музики за допомогою Shazam

• Apple Watch Series 12, Apple Watch Ultra 4

• iPhone 11 або новішої моделі, iPhone SE (2-го покоління чи новішого) з iOS 27

Функції «Перемотування назад наживо» та Siri Recap

Бета-версії цих функцій стануть доступними пізніше цього року.

• Apple Watch Series 12, Apple Watch Ultra 4

• iPhone 16, iPhone 16 Plus, iPhone 16 Pro, iPhone 16 Pro Max, iPhone 17, iPhone 17e, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 18 Pro, iPhone 18 Pro Max або iPhone Duo

• Потрібні Apple Intelligence і Siri AI (бета-версія)²

• Функції «Перемотування назад наживо» та Siri Recap недоступні для користувачів віком до 13 років. Для користувачів віком до 18 років, які мають дитячий обліковий запис, доступ до цих функцій мають увімкнути батьки або опікуни.

• Доступно англійською мовою; підтримку інших мов буде додано згодом

Додаткова інформація

• Огляд політики приватності аудіоінтелекту

• Докладніше про Приватні хмарні обчислення