Over de Audio Intelligence-functies op de Apple Watch Series 12 en Apple Watch Ultra 4
Audio Intelligence is een volledig nieuwe klasse van Apple Intelligence-functies die gebruikmaken van de microfoons van Apple Watch, de kracht van Apple silicon en AI-modellen op het apparaat en in de cloud om je te helpen geluiden te detecteren, muziek te identificeren en aanwezig en betrokken te blijven, terwijl je privacy bij elke stap wordt beschermd. Audio Intelligence omvat Geluidsherkenning, automatische muziekherkenning met Shazam, Live terugspoelen en Siri Samenvatting.
Live terugspoelen en Siri Samenvatting zijn later dit jaar beschikbaar als bètaversie, eerst in het Engels. Meer details zijn beschikbaar bij de lancering.
Wat de functies van Audio Intelligence doen
Audio Intelligence op de Apple Watch is afhankelijk van de nauwe integratie van hardware en software met de nieuwste AI-modellen om vier nieuwe functies te bieden.
Geluidsherkenning
Geluidsherkenning detecteert belangrijke geluiden zoals sirenes, alarmen en deurbellen en waarschuwt je, zelfs als je je iPhone niet bij je hebt. Dit is vooral handig voor mensen die doof of slechthorend zijn.
Muziekherkenning
Met Muziekherkenning met Shazam wordt automatisch het nummer dat op de achtergrond wordt afgespeeld gedetecteerd en worden de titel en artiestennaam weergegeven in de slimme stapel, allemaal zonder op de widget te tikken.
Live terugspoelen
Live terugspoelen1 herinnert je aan wat er net in de afgelopen 15 seconden is gezegd door een tekstfragment op je Apple Watch weer te geven wanneer je tweemaal op de Digital Crown drukt, zodat je iets kunt opvangen dat je hebt gemist of waarmee je minder vertrouwd bent. Je kunt Siri vragen naar de inhoud van het fragment of het fragment gewoon bewaren in de Siri-app.
Siri Samenvatting
Siri Samenvatting1 maakt gedurende je hele dag op de achtergrond notities van je gesprekken en creëert samenvattingen op hoog niveau die door Apple Intelligence zijn gegenereerd en die je later kunt gebruiken om je geheugen op te frissen, zodat je in het moment kunt blijven. Je samenvattingen worden na 7 dagen automatisch verwijderd als je ervoor kiest ze niet te bewaren.
Jij bepaalt
Elke Audio Intelligence-functie is optioneel. En voor Live terugspoelen en Siri Samenvatting bepaal je zelf wanneer en waar elke functie actief is.
Geluidsherkenning kan worden ingeschakeld via de Instellingen-app op de iPhone. Open de Instellingen-app op de iPhone, tik op Toegankelijkheid, tik op Geluids- en naamherkenning, tik op Geluidsherkenning en schakel ‘Detecteer met Apple Watch’ in. Als je Geluidsherkenning al hebt ingeschakeld op je iPhone, wordt deze automatisch ingeschakeld op je Apple Watch.
Shazam kan worden ingeschakeld in de Instellingen-app op de Apple Watch. Open de Instellingen-app op de Apple Watch, tik op Slimme stapel en schakel ‘Muziekdetectie’ in, of tik op de widget ‘Muziekdetectie inschakelen’ wanneer deze in je slimme stapel verschijnt. Als je 'Muziekdetectie' al hebt ingeschakeld op de Apple Watch, hoef je dit niet opnieuw in te schakelen.
Live terugspoelen wordt alleen geactiveerd wanneer je bewust tweemaal op de Digital Crown drukt. De laatste 15 seconden van de spraak worden alleen als tekstfragment op het scherm weergegeven. De transcriptie wordt niet op de achtergrond voortgezet en de tekst wordt niet bewaard, tenzij je Siri naar de inhoud vraagt of de tekst bewaart in de Siri-app. Je kunt deze functie inschakelen via de Watch-app op iPhone, open de Watch-app, tik op Siri, tik op Live terugspoelen en schakel ‘Dubbel tikken op Digital Crown’ in.
Siri Samenvatting wordt alleen uitgevoerd als je daarvoor kiest. Je kunt Siri Samenvatting inschakelen in de Watch-app op iPhone. Wanneer je deze functie inschakelt, kun je een schema instellen op basis van tijd en/of locatie (bijvoorbeeld 'alleen op het werk' of 'nooit 's nachts'), of je kunt deze functie handmatig in- en uitschakelen. Bij al deze opties kun je deze functie op elk gewenst moment in- of uitschakelen via het bedieningspaneel.
Je gegevens blijven van jou. Je kunt je samenvattingen van Siri Samenvatting op elk gewenst moment bekijken, bewerken en verwijderen in de Siri-app, inclusief eventuele Live terugspoelen-tekstfragmenten die je hebt bewaard. Als je er één verwijdert, wordt deze verwijderd van al je gesynchroniseerde apparaten. Je kunt je samenvattingen en tekstfragmenten ook exporteren naar andere apps, waaronder Notities, Dagboek en meer.
Alleen jij hebt toegang tot je samenvattingen. Samenvattingen van Siri Samenvatting en bewaarde Live terugspoelen-tekstfragmenten die zijn opgeslagen in de Siri-app, worden end-to-end versleuteld wanneer ze worden gesynchroniseerd via iCloud, zodat alleen jij er toegang toe hebt, en alleen op je vertrouwde apparaten.
Hoe Audio Intelligence-functies je privacy beschermen
Net als al onze producten en functies is Audio Intelligence op de Apple Watch vanaf de basis ontworpen om je privacy te beschermen.
Audio wordt niet opgenomen of bewaard. Audio Intelligence-functies maken geen audio-opnamen. Het besturingssysteem, apps, jijzelf of zelfs Apple hebben geen toegang tot de audio. Er is geen opname om te delen, door te sturen of te verstrekken als daarom wordt gevraagd, omdat er geen opname bestaat.
Ruwe audio is nooit toegankelijk. Audio stroomt naar een beschermde buffer in de Secure Exclave van de S11-chip, een hardware-geïsoleerd onderdeel dat is ingebouwd in de siliciumchip van de Apple Watch en iPhone en dat sensorgegevens afzonderlijk van de rest van het systeem verwerkt. Gegevens die in de Secure Exclave worden verwerkt en geanalyseerd, zijn niet toegankelijk voor het besturingssysteem, apps, jou of zelfs Apple. Deze gegevens worden onmiddellijk verwijderd nadat ze zijn verwerkt.
Siri Samenvatting en Live terugspoelen helpen je geheugen op te frissen, maar bieden geen gedetailleerd verslag. Siri Samenvatting maakt geen transcript. Het genereert een korte samenvatting op hoog niveau, vergelijkbaar met notities die je na een gesprek zou kunnen maken. Live terugspoelen toont een tekstfragment van wat er net in de afgelopen 15 seconden is gezegd, zodat je iets kunt terughalen dat je hebt gemist.
Je gegevens zijn niet toegankelijk voor Apple. Voor Siri Samenvatting vatten de Apple Foundation Models, die draaien op Private Cloud Compute (PCC), de uiteindelijke uitvoer samen en maken deze op. Gegevens in PCC worden nooit bewaard en zijn niet toegankelijk voor Apple of wie dan ook. Deze worden alleen gebruikt om aan je verzoek te voldoen en onafhankelijke beveiligingsexperts kunnen deze belofte op elk moment verifiëren.
Je gegevens worden automatisch verwijderd als je geen actie onderneemt. Samenvattingen van Siri Samenvatting worden na 7 dagen automatisch verwijderd als je ze niet bewaart of exporteert. Tekstfragmenten van 15 seconden van Live terugspoelen verdwijnen permanent van je Apple Watch ongeveer 30 seconden nadat het scherm van de Apple Watch dimt, tenzij je ze bewaart in de Siri-app of op 'Vraag het aan Siri' tikt.
Je gegevens worden end-to-end versleuteld wanneer ze worden gesynchroniseerd met iCloud. Als je iCloud gebruikt met tweefactorauthenticatie en een toegangscode voor je apparaat hebt, worden alle samenvattingen van Siri Samenvatting of tekstfragmenten van Live terugspoelen die je bewaart, end-to-end versleuteld gesynchroniseerd op al je apparaten in de Siri-app. Alleen jij hebt toegang tot deze gegevens, en alleen op apparaten waarop je bent aangemeld bij iCloud. Apple bewaart de encryptiesleutels niet. Niemand anders, zelfs Apple niet, heeft toegang tot de end-to-end versleutelde gegevens die je hebt bewaard in de Siri-app.
Hoe Audio Intelligence-functies de privacy van mensen in de buurt beschermen
Deze functies zijn ontworpen om niet alleen je privacy te beschermen, maar ook de privacy van mensen in de buurt.
Geen toeschrijving aan een spreker. Audio Intelligence-functies zijn zo ontworpen dat ze sprekers niet identificeren en niet aan hen toeschrijven. Siri Samenvatting kan namen bevatten als deze in het gesprek worden genoemd, maar schrijft de sprekers niet direct toe (bijvoorbeeld 'John zei...' of labels als 'Spreker A' versus 'Spreker B'). Live terugspoelen kan ook woord voor woord transcriberen wat iemand heeft gezegd, maar schrijft citaten niet toe aan sprekers.
Hoorbare en zichtbare signalen voor Live terugspoelen. Wanneer de functie is geactiveerd, hoor je een geluidssignaal uit de luidspreker op je Apple Watch, zelfs als je Apple Watch in de stille modus staat of als je een koptelefoon hebt aangesloten. Er verschijnt een animatie op het volledige scherm en een microfoonindicator op het scherm. Je moet tweemaal drukken om Live terugspoelen te activeren. Hiermee worden mensen in de buurt gewaarschuwd dat de functie is geactiveerd.
Weggelaten inhoud. Siri Samenvattingen zijn ontworpen om mogelijk schadelijke inhoud weg te laten, zoals taal die zelfbeschadiging of haatdragende uitingen bevordert, en gevoelige informatie, zoals financiële gegevens, door de overheid toegewezen identificatiegegevens, authenticatiegegevens en bepaalde persoonlijke identificatiegegevens.
Wees je bewust van de mensen om je heen. Hoewel audio niet wordt opgenomen en opgeslagen, en er geen sprekers worden toegeschreven, moet je rekening houden met de mensen om je heen, waar gesprekken privé of gevoelig kunnen zijn.
Hoe je gegevens worden verwerkt door Audio Intelligence
Privacy is ingebouwd in de Apple Watch, vanaf de chip, met hardware en software die naadloos samenwerken. Hoewel verschillende Audio Intelligence-functies je gegevens op verschillende manieren verwerken, is één ding consistent: geen van je gegevens is ooit toegankelijk voor Apple.
Audio wordt in de hardware beschermd. Alle vier de features worden mogelijk gemaakt door de nieuwe S11-chip op Apple Watch en de Secure Exclave, de speciale veilige buffer die audio privé verwerkt in een beveiligde omgeving waartoe niemand toegang heeft, zelfs Apple niet.
Shazam deelt alleen een akoestische vingerafdruk. Als je de Slimme stapel op de Apple Watch opent en er muziek is gedetecteerd, verwerkt de Secure Exclave de audio in de beveiligde buffer en maakt hij een akoestische signatuur van dat nummer, een compacte weergave die niet kan worden teruggezet naar de oorspronkelijke audio. Dat kenmerk, niet de onbewerkte audio, wordt vervolgens naar Shazam-servers gestuurd om het nummer te identificeren.
Geluidsherkenning en Live terugspoelen worden op het apparaat verwerkt. Alle verwerking, inclusief spraakherkenning, vindt plaats op je Apple Watch en iPhone. Als je Siri vraagt naar de inhoud van je tekstfragment van Live terugspoelen of het in de Siri-app bewaart, wordt het veilig naar Private Cloud Compute verstuurd.
Siri Samenvatting maakt gebruik van Private Cloud Compute. De Secure Exclave op de Apple Watch versleutelt de gedetecteerde audio en verzendt deze naar de Secure Exclave op de gekoppelde iPhone. De versleutelde audio wordt vervolgens ontsleuteld, getranscribeerd en samengevat in de Secure Enclave van de iPhone. Om een samenvatting te maken, stuurt Siri Samenvatting een versleutelde, samengeperste versie van het gespreksverslag van je iPhone naar Private Cloud Compute. Deze samengeperste tekst is ontworpen om minder dan de helft van de lengte van het oorspronkelijke transcript te zijn en destilleert het gesprek tot de kern. Inhoud die de toon van een gesprek weergeeft, niet-essentiële taal, opvulwoorden en redundantie worden verwijderd, terwijl de besproken onderwerpen behouden blijven. Deze samengeperste tekst wordt samen met enkele contextuele gegevens naar PCC gestuurd om de samenvatting te genereren. De uiteindelijke, op tekst gebaseerde samenvatting wordt versleuteld en vanuit Private Cloud Compute teruggestuurd naar iPhone en Apple Watch.
End-to-end versleutelde synchronisatie met iCloud.Samenvattingen van Siri Samenvatting en opgeslagen tekstfragmenten van Live terugspoelen staan in de Siri-app op het tabblad Samenvattingen, end-to-end versleuteld met iCloud-synchronisatie.
Alles binnen de hardware- en softwarearchitectuur van Apple. Audio Intelligence-functies zijn ontworpen met een nauw geïntegreerde architectuur waarin je gegevens alleen op het apparaat en met Private Cloud Compute worden verwerkt.
Wat je nodig hebt
Geluidsherkenning en automatische muziekherkenning met Shazam
Apple Watch Series 12, Apple Watch Ultra 4
iPhone 11 of nieuwer of iPhone SE (2e generatie of nieuwer) met iOS 27
Live terugspoelen en Siri Samenvatting
Deze features zijn later dit jaar beschikbaar als bètaversie.
Apple Watch Series 12, Apple Watch Ultra 4
iPhone 16, iPhone 16 Plus, iPhone 16 Pro, iPhone 16 Pro Max, iPhone 17, iPhone 17e, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 18 Pro, iPhone 18 Pro Max of iPhone Duo
Vereist Apple Intelligence en Siri AI (bèta)2
Live terugspoelen en Siri Samenvatting zijn niet beschikbaar voor gebruikers jonger dan 13 jaar. Voor gebruikers jonger dan 18 jaar met een kinderaccount moet toegang tot Live terugspoelen en Siri Samenvatting worden ingeschakeld door een ouder of voogd.
Beschikbaar in het Engels, meer talen volgen
Meer informatie
Samenvattingen van Siri Samenvatting en tekstfragmenten van Live terugspoelen worden gegenereerd met Apple Intelligence en kunnen onvolledig of onnauwkeurig zijn. Belangrijke details kunnen worden weggelaten, verkeerd begrepen of verkeerd samengevat. Wanneer nauwkeurigheid ertoe doet, moet je belangrijke informatie bevestigen bij de betrokken personen of via een andere betrouwbare bron. Siri Samenvatting is ontworpen om bepaalde potentieel gevoelige inhoud te beperken, zoals financiële informatie, door de overheid toegewezen identificatiegegevens en meer, maar geautomatiseerde filtering verwijdert mogelijk niet alle gevoelige informatie.
Onze nieuwste versie van Siri, Siri AI, wordt geleidelijk uitgerold als bètaversie. Siri AI is later dit jaar beschikbaar als bètaversie en vereist een apparaat waarop Apple Intelligence is ingeschakeld en dat is ingesteld op een ondersteunde taal. Siri AI is in eerste instantie niet beschikbaar in de EU op iOS, iPadOS en watchOS.