Informationen zu Audio Intelligence-Features auf der Apple Watch Series 12 und Apple Watch Ultra 4

Audio Intelligence ist eine völlig neue Klasse von Apple Intelligence-Features, die die Mikrofone der Apple Watch, die Leistung der Apple Chips sowie On-Device- und cloudbasierte KI-Modelle nutzen, um dir zu helfen, Geräusche zu erkennen, Musik zu identifizieren und stets präsent und aufmerksam zu bleiben – wobei deine Privatsphäre immer geschützt bleibt. Audio Intelligence umfasst Geräuscherkennung, automatische Musikerkennung mit Shazam, Live Rewind und Siri Recap.

Live Rewind und Siri Recap werden später in diesem Jahr als Beta veröffentlicht, zunächst auf Englisch. Weitere Informationen folgen bei Veröffentlichung.

Was die Audio Intelligence-Features können

Audio Intelligence auf der Apple Watch basiert auf der engen Integration von Hardware und Software mit den neuesten KI-Modellen und umfasst vier neue Features.

Du hast die Kontrolle

Jedes Audio Intelligence-Feature erfordert deine aktive Zustimmung. Bei Live Rewind und Siri Recap entscheidest du, wann und wo es jeweils aktiv ist.

• Die Geräuscherkennung kannst du über die Einstellungen-App auf dem iPhone aktivieren. Öffne die Einstellungen-App auf dem iPhone, tippe auf „Bedienungshilfen“, dann auf „Geräusch- & Namenserkennung“, dann auf „Geräuscherkennung“, und aktiviere „Detect using Apple Watch“ (Mit Apple Watch erkennen). Wenn du die Geräuscherkennung bereits auf dem iPhone aktiviert hast, wird sie automatisch auf der Apple Watch aktiviert.

• Shazam kannst du in der Einstellungen-App auf der Apple Watch aktivieren. Öffne die Einstellungen-App auf der Apple Watch, tippe dann auf „Smart-Stapel“ und aktiviere „Musikerkennung“ (oder tippe auf das Widget „Musikerkennung aktivieren“, wenn es in deinem Smart-Stapel angezeigt wird). Wenn die Musikerkennung bereits auf deiner Apple Watch aktiviert ist, musst du nichts weiter tun.

• Live Rewind wird nur aktiviert, wenn du die Digital Crown bewusst zweimal drückst. Es zeigt nur die letzten 15 Sekunden eines Gesprächs als Textausschnitt auf dem Display an. Die Transkription wird weder im Hintergrund fortgesetzt noch wird der Text gesichert, es sei denn, du fragst Siri nach dem Inhalt oder sicherst ihn in der Siri-App. Du kannst das Feature in der Watch-App auf dem iPhone einschalten – öffne einfach die Watch-App, tippe auf „Siri“, dann auf „Live Rewind“ und aktiviere „Double Click Digital Crown“ (Doppelklick der Digital Crown).

• Siri Recap wird nur ausgeführt, wenn du es auswählst. Du kannst Siri Recap in der Watch-App auf dem iPhone aktivieren. Wenn du es aktivierst, kannst du einen Zeitplan mit Uhrzeit und/oder Standort festlegen (z. B. „Nur bei der Arbeit“ oder „Nie nachts“), oder du kannst es manuell ein- und ausschalten. Unabhängig von der Option kanns du es jederzeit im Kontrollzentrum ein- oder ausschalten.

• Deine Daten gehören nur dir. Du kannst all deine Siri Recap-Zusammenfassungen jederzeit in der Siri-App anzeigen, bearbeiten und löschen, auch deine gesicherten Live Rewind-Textausschnitte. Wenn du etwas löschst, wird es von all deinen synchronisierten Geräten entfernt. Du kannst deine Zusammenfassungen und Textauszüge auch in andere Apps exportieren, darunter Notizen, Journal und mehr.

• Nur du kannst auf deine Zusammenfassungen zugreifen. Siri Recap-Zusammenfassungen und gesicherte Live Rewind-Textausschnitte, die in der Siri-App gespeichert sind, werden beim Synchronisieren über iCloud Ende-zu-Ende-verschlüsselt, sodass nur du darauf zugreifen kannst – und nur auf deinen vertrauenswürdigen Geräten.

Wie die Audio Intelligence-Features deine Privatsphäre schützen

Wie alle unsere Produkte und Features wurde Audio Intelligence auf der Apple Watch von Grund auf zum Schutz deiner Privatsphäre entwickelt.

• Audio wird nicht aufgezeichnet oder gespeichert. Audio Intelligence-Features erstellen keine Audioaufnahmen. Das Betriebssystem, Apps, du selbst und Apple können auf keinerlei Audio zugreifen. Es gibt keine Aufzeichnungen, die geteilt, weitergeleitet oder auf Anfrage offengelegt werden können, da schlicht keine Aufzeichnungen existieren.

• Roh-Audio ist niemals zugänglich. Das Audio gelangt in einen geschützten Puffer innerhalb der Secure Exclave des S11 Chips – einem hardware-isolierten Bereich, der in den Chip der Apple Watch und des iPhone eingebettet ist und Sensordaten getrennt vom restlichen System verarbeitet. Auf Daten, die in der Secure Exclave verarbeitet und analysiert werden, kann weder das Betriebssystem noch Apps, du selbst oder Apple zugreifen. Nach der Verarbeitung werden diese Daten sofort gelöscht.

• Siri Recap und Live Rewind dienen nur als Erinnerungsstütze und stellen keine detaillierten Aufzeichnungen bereit. Siri Recap erstellt kein Transkript, sondern eine kurze, allgemeine Zusammenfassung – vergleichbar mit Notizen, die man sich nach einem Gespräch macht. Live Rewind zeigt einen Textausschnitt dessen an, was in den letzten 15 Sekunden gesagt wurde, damit du nichts verpasst.

• Deine Daten sind für Apple nicht zugänglich. Für Siri Recap fassen die Apple Foundation Models, die in Private Cloud Compute (PCC) ausgeführt werden, die endgültige Ausgabe zusammen und formatieren sie. Die Daten in PCC werden niemals von Apple oder Dritten gespeichert und sind auch nicht für sie zugänglich. Die Daten werden nur verwendet, um deine Anfrage zu erfüllen, und unabhängige Sicherheitsexperten können dieses Versprechen jederzeit überprüfen.

• Wenn du nichts tust, werden deine Daten automatisch gelöscht. Siri Recaps werden nach 7 Tagen automatisch gelöscht, wenn du sie nicht sicherst oder exportierst. Die 15-Sekunden-Textausschnitte von Live Rewind werden ca. 30 Sekunden nach Abdunkelung des Apple Watch-Displays endgültig von deiner Apple Watch entfernt, sofern du sie nicht in der Siri-App sicherst oder auf „Siri fragen“ tippst.

• Deine Daten werden bei Synchronisierung mit iCloud Ende-zu-Ende-verschlüsselt. Wenn du iCloud mit Zwei-Faktor-Authentifizierung verwendest und einen Gerätecode hast, werden alle von dir ausgewählten Siri Recap-Zusammenfassungen oder Live Rewind-Textausschnitte auf all deinen Geräten Ende-zu-Ende-verschlüsselt über die Siri-App synchronisiert. Nur du kannst auf diese Daten zugreifen, und auch nur auf Geräten, auf denen du bei iCloud angemeldet bist. Apple ist nicht im Besitz der Verschlüsselungsschlüssel. Niemand sonst, nicht einmal Apple, kann auf die Ende-zu-Ende-verschlüsselten Daten zugreifen, die du in der Siri-App sicherst.

Wie Audio Intelligence-Features die Privatsphäre von Personen in der Nähe schützen

Diese Features schützen nicht nur deine Privatsphäre, sondern auch die von Personen in deiner Nähe.

• Keine Sprecherzuweisung. Die Audio Intelligence-Features können keine Sprecher identifizieren oder zuordnen. Siri Recap kann Namen enthalten, die im Gespräch erwähnt werden, ordnet die Sprecher aber nicht direkt zu (z. B. „John sagte …“ oder Bezeichnung als „Sprecher A“ vs. „Sprecher B“). Ganz ähnlich kann Live Rewind das Gesagte zwar wortgetreu transkribieren, aber ohne Zitate bestimmten Sprechern zuzuordnen.

• Akustische und visuelle Signale für Live Rewind. Bei Aktivierung des Features gibt der Apple Watch-Lautsprecher einen akustischen Signalton wieder, auch wenn die Apple Watch stummgeschaltet ist oder Kopfhörer angeschlossen sind. Eine Vollbild-Animation und ein Mikrofonsymbol erscheinen auf dem Display, und eine deutlich erkennbare Doppeldruckgeste ist erforderlich, um Live Rewind zu aktivieren. Dies weist Personen in der Nähe darauf hin, dass das Feature aktiviert wurde.

• Ausgelassene Inhalte. Bestimmte Inhalte werden in Siri Recaps ausgelassen, darunter potenziell schädliche Inhalte wie Formulierungen, die Selbstverletzung oder Hassrede fördern, sowie sensible Informationen wie Finanzdaten, behördliche Kennungen, Authentifizierungsdaten und bestimmte persönliche Kennungen.

• Denk an deine Mitmenschen. Obwohl keinerlei Audio aufgezeichnet und gespeichert wird und keine Sprecher zugeordnet werden, solltest du immer an die Menschen um dich herum denken – eventuell sind ihre Gespräche privat oder vertraulich.

Wie Audio Intelligence deine Daten verarbeitet

Datenschutz ist in die Apple Watch integriert, angefangen beim Chip, wobei Hardware und Software nahtlos zusammenarbeiten. Auch wenn verschiedene Audio Intelligence-Features deine Daten unterschiedlich verarbeiten, ist eines immer gleich: Apple kann niemals auf deine Daten zugreifen.

• Audio ist durch die Hardware geschützt. Alle vier Features fußen auf dem neuen S11 Chip in der Apple Watch und seiner Secure Exclave – einem dedizierten sicheren Puffer, der Audio privat in einer geschützten Umgebung verarbeitet, auf die niemand zugreifen kann, nicht einmal Apple.

• Shazam teilt nur eine akustische Signatur. Wenn du den Smart-Stapel auf der Apple Watch öffnest und Musik erkannt wurde, verarbeitet die Secure Exclave das Audio im sicheren Puffer und erstellt eine akustische Signatur dieses Songs (eine kompakte Darstellung, die nicht in das Original-Audio umgewandelt werden kann). Diese Signatur – nicht das Roh-Audio – wird dann an die Shazam-Server gesendet, um den Song zu identifizieren.

• Geräuscherkennung und Live Rewind werden auf dem Gerät verarbeitet. Die gesamte Verarbeitung, einschließlich Spracherkennung, erfolgt auf der Apple Watch und dem iPhone. Wenn du Siri nach dem Inhalt eines Live Rewind-Textausschnitts fragst oder ihn in der Siri-App sicherst, wird er sicher an Private Cloud Compute gesendet.

• Siri Recap nutzt Private Cloud Compute. Die Secure Exclave auf der Apple Watch verschlüsselt das erkannte Audio und überträgt es an die Secure Exclave auf dem gekoppelten iPhone. Das verschlüsselte Audio wird dann in der Secure Exclave des iPhone entschlüsselt, transkribiert und komprimiert. Um eine Zusammenfassung zu erstellen, sendet Siri Recap eine verschlüsselte, gekürzte Version des Gesprächstranskripts von deinem iPhone an Private Cloud Compute. Dieser komprimierte Text ist weniger als halb so lang wie das ursprüngliche Transkript und fasst den Kerninhalt des Gesprächs zusammen. Inhalte, die den Ton der Unterhaltung suggerieren, sowie unwichtige Formulierungen, Füllwörter und Wiederholungen werden entfernt, während die besprochenen Themen erhalten bleiben. Dieser komprimierte Text wird zusammen mit relevanten Kontextinformationen an PCC gesendet, um die Zusammenfassung zu generieren. Die fertige, textbasierte Zusammenfassung wird verschlüsselt und von Private Cloud Compute zurück an das iPhone und die Apple Watch gesendet.

• Ende-zu-Ende-Verschlüsselung bei Synchronisierung mit iCloud. Siri Recap-Zusammenfassungen und gesicherte Live Rewind-Textausschnitte befinden sich in der Siri-App im Tab „Recaps“ und werden Ende-zu-Ende-verschlüsselt sowie mit iCloud synchronisiert.

• Alles bleibt in der Hardware- und Softwarearchitektur von Apple. Die Audio Intelligence-Features haben eine eng integrierte Architektur, in der deine Daten nur auf dem Gerät und mit Private Cloud Compute verarbeitet werden.

Voraussetzungen

Geräuscherkennung und automatische Musikerkennung mit Shazam

• Apple Watch Series 12, Apple Watch Ultra 4

• iPhone 11 oder neuer oder iPhone SE (2. Generation oder neuer) mit iOS 27

Live Rewind und Siri Recap

Diese Features werden später in diesem Jahr als Beta veröffentlicht.

• Apple Watch Series 12, Apple Watch Ultra 4

• iPhone 16, iPhone 16 Plus, iPhone 16 Pro, iPhone 16 Pro Max, iPhone 17, iPhone 17e, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 18 Pro, iPhone 18 Pro Max oder iPhone Duo

• Erfordert Apple Intelligence und Siri AI (Beta)²

• Live Rewind und Siri Recap sind für Benutzer unter 13 Jahren nicht verfügbar. Für Benutzer unter 18 Jahren mit einem Kinderaccount muss der Zugriff auf Live Rewind und Siri Recap von einem Elternteil oder Erziehungsberechtigten aktiviert werden.

• Verfügbar auf Englisch, weitere Sprachen folgen

Weitere Informationen

• Audio Intelligence: Datenschutzüberblick

• Weitere Informationen zu Private Cloud Compute