Apple hat offiziell die neue Funktion Audio Intelligence eingeführt, die erstmals heute in der Apple Watch Series 12 und der Apple Watch Ultra 4 implementiert ist. Das Unternehmen hat in einem neuen Dokument detailliert beschrieben, wie die neue Funktion funktioniert, insbesondere in Bezug auf Datenschutzüberlegungen. Audio Intelligence umfasst vier Funktionen auf der Apple Watch, darunter Live Rewind und Siri Recap.
Apple erklärt, dass Audio Intelligence eine neue Art von Apple Intelligence-Funktion ist, die die Mikrofone der Apple Watch, die leistungsstarke Hardware von Apple sowie KI-Modelle, die auf Geräten und in der Cloud basieren, nutzt, um den Nutzern zu helfen, Geräusche zu erkennen, Musik zu identifizieren und konzentriert sowie engagiert zu bleiben, während die Privatsphäre der Nutzer in jedem Schritt geschützt wird.
Audio Intelligence umfasst zunächst vier spezifische Funktionen: Sound Recognition, Shazam automatische Musikidentifikation, Live Rewind und Siri Recap. Das Unternehmen gab an, dass Live Rewind und Siri Recap später in diesem Jahr in einer Testversion verfügbar sein werden und Englisch unterstützen, und fügte hinzu, dass weitere Details zum offiziellen Launch bereitgestellt werden. Jede Audio Intelligence-Funktion ist optional aktivierbar, und Apple erklärt, dass Nutzer Live Rewind und Siri Recap nach Bedarf einfach aktivieren oder deaktivieren können.
Die Audio Intelligence-Funktion der Apple Watch wird das Nutzererlebnis verbessern
Zu Live Rewind erläutert Apple weiter: Live Rewind wird nur aktiviert, wenn der Nutzer absichtlich die Digital Crown doppelt tippt. Es zeigt nur die letzten 15 Sekunden des Sprachinhalts an, dargestellt als Textausschnitt auf dem Display des Nutzers. Es wird nicht kontinuierlich im Hintergrund transkribiert und speichert den Text nicht, es sei denn, der Nutzer wählt aus, Siri nach dem Inhalt zu fragen oder ihn in der Siri-App zu speichern. Nutzer können diese Funktion über die Watch-App auf dem iPhone aktivieren, indem sie einfach die Watch-App öffnen, auf Siri tippen und dann Live Rewind aktivieren, indem sie „Doppeltippen auf Digital Crown“ auswählen.
Was Siri Recap betrifft, so erklärt Apple: Siri Recap läuft nur, wenn der Nutzer sich dafür entscheidet. Nutzer können Siri Recap in der Watch-App auf dem iPhone aktivieren. Wenn aktiviert, können Nutzer Zeit- und/oder Standortbasierte Pläne festlegen (z. B. nur während der Arbeit oder nie nachts), oder manuell ein- und ausschalten.
Bei all diesen Optionen können Nutzer jederzeit im Kontrollzentrum diese Funktion ein- oder ausschalten. Audio Intelligence wird keine Sprache einem Sprecher zuordnen, und Siri Recap ist so konzipiert, dass potenziell schädliche Inhalte und sensible Informationen weggelassen werden. Apple erklärt, dass Live Rewind durch akustische Hinweise und visuelle Indikatoren in der Nähe befindliche Personen warnt. Für weitere Informationen zu diesen neuen Funktionen können Nutzer den entsprechenden Artikel von Apple konsultieren.
Wenn Nutzer mehr über Datenschutz und die neuen Funktionen erfahren möchten, hat Apple ein 11-seitiges Datenschutzdokument veröffentlicht, das diese Themen weiter untersucht. Interessanterweise erklärt Apple in dem Dokument, wie Live Rewind den Datenschutz berücksichtigt: Der Audio-Stream des Mikrofons gelangt in den geschützten Audio-Puffer des S11-Chips. Alte Audiodaten werden ständig durch neue Audiodaten ersetzt, sodass sich die Audiodaten nicht ansammeln und das Originalaudio außerhalb dieses geschützten Puffers nicht zugänglich ist. Was die Siri Recap-Funktion betrifft, so gibt Apple einige Erklärungen zu ihrer Funktionsweise: Der S11-Chip verwendet ein leichtgewichtiges KI-Modell, um festzustellen, ob in der Nähe Sprache auftritt.
Dieses Modell führt keine Transkription oder Aufnahme durch, sondern erkennt einfach, ob ein Gespräch begonnen hat. Wenn ein Gespräch erkannt wird, fließt der Audio-Stream in den geschützten Puffer innerhalb des Secure Exclave des S11-Chips. Dieser Prozess erfolgt auf Hardware-Ebene isoliert, um sicherzustellen, dass Nutzer, Betriebssystem, Anwendungen und sogar Apple keinen Zugriff darauf haben.
Nutzer können hier das vollständige 11-seitige Datenschutzdokument einsehen. Mit diesen neuen Funktionen können Nutzer ihre Apple-Produkte besser nutzen.