Nachdem Apple bereits seit einiger Zeit die AirPods-Kopfhörer als Hörgeräte vermarktet und bei Accessibility-Features auf Schwerhörige achtet, soll es demnächst für die neuen Apple Watch-Modelle die Funktion geben, Gesprächsinhalte noch einmal wiederzugeben – schriftlich.
Bei der jährlichen iPhone-Keynote am 9. September wurde das Feature anhand einer für viele Schwerhörige bekannten Situation im Café gezeigt. Die Bedienung ratterte die Bestellmöglichkeiten runter, woraufhin der Gast die Krone seiner Apple Watch zweimal drückte und daraufhin die letzten 15 Sekunden des Gesprächs noch einmal als Text auf seiner Uhr angezeigt bekam. Dieses Feature könnte nicht nur für Schwerhörige interessant sein, sondern auch für Gehörlose, die ungefragt angequatscht werden. Einfach die Uhr antippen, und das Gesagte wird verschriftlicht. Das funktioniert, weil man die Uhr so einstellen kann, dass sie ständig mithört.
Schnell wurden nach dieser Präsentation Datenschutzbedenken laut, die Apple aber damit beschwichtigt, dass die verschriftlichten Gespräche unmittelbar wieder gelöscht würden, sofern man sie nicht speichert, und die Tonaufnahmen nicht gespeichert werden können.
Das „Live Rewind“ (= Echtzeit-Rückspulen) Feature ist Teil einer Reihe von neuen Features, die unter dem Begriff „Audio Intelligence“ zusammengefasst werden und ebenfalls für alle interessant sind, die aus welchem Grund auch immer mit der Lautsprache strugglen.
Auf einer Übersichtsseite wurden jetzt verschiedene Audio Intelligence-Features vorgestellt und die Datenschutz-Maßnahmen erläutert.
Im Kern gibt es vier Funktionen:
Sound Recognition (Geräuscherkennung)
Dieses Feature gibt es bereits länger, soll aber jetzt über die neuen Apple Watch-Modelle besser funktionieren. Geräusche wie Sirenen, Klingeln, Schreien oder Bellen werden erkannt und über eine visuelle Nachricht angezeigt.
Music Recognition (Musikerkennung)
Lieder werden erkannt und es wird angezeigt, von welcher Band oder Person das Lied ist. Bisher konnte man bereits über Siri die App Shazam aktivieren („Wie heißt das Lied?“), jetzt gibt es aber eine Einstellung bei der automatisch das gerade laufende Lied auf der Uhr angezeigt wird.
Live Rewind (Echtzeit-Rückspulen)
Wie oben beschrieben: Durch Doppelklick auf die Krone werden die letzten 15 Sekunden Gespräch schriftlich wiederholt und können bei Bedarf schriftlich gespeichert werden.
Siri Recap (Siri-Zusammenfassung)
Siri hört mit – und gibt eine schriftliche Zusammenfassung wieder. Das kann ein Meeting auf Arbeit sein, eine Arzttermin, oder auch eine Familienfeier. Das Feature kann nach Bedarf aktiviert werden, aber auch nur zu bestimmten Tageszeiten oder auf Wunsch laufen. Die schriftliche Zusammenfassung wird nach sieben Tagen automatisch gelöscht, außer man speichert sie.
Zum Thema Datenschutz betont Apple, dass der Ton nicht aufgezeichnet oder gespeichert wird und somit auch nicht geteilt oder weiterverarbeitet werden kann. Die Rohdaten können zu keinem Zeitpunkt von anderen Diensten abgegriffen werden. Auch bietet Siri Recap und Live Rewind kein 1:1-Transkript, sondern eine Zusammenfassung mit den wichtigsten Informationen. Apple vergleicht es mit Notizen, die man selber während eines Gesprächs führen würde. Nur Live Rewind gibt 1:1 wieder, was in den letzten 15 Sekunden gesagt wurde. Die Zusammenfassungen/Texte werden anschließend nach einer bestimmten Zeit gelöscht, können aber auch manuell gespeichert werden. Alle Daten sind Ende-zu-Ende verschlüsselt.
Zum Schutz derer, deren Stimme verschriftlicht wird, gibt es außerdem keine Sprecherzuweisung oder Benennung der Sprechenden. Beim Aktivieren von Live Rewind piept die Uhr außerdem laut und zeigt ein animiertes Mikrofon auf dem Display, so dass klar wird, dass ein Mikrofon eingesetzt wurde. So sollen es alle Anwesenden mitbekommen, dass das Feature eingesetzt wird.
Außerdem erkennt Siri für die Siri Recaps automatisch sensible Daten wie Bankdaten und „Hassrede“, die dann automatisch entfernt werden.
Von den beschriebenen Features sind vor allem Live Rewind und Siri Recap interessant für Schwerhörige und Gehörlose. Live Rewind dürfte gerade in Situationen mit kurzem Kontakt mit Hörenden hilfreich sein, wie im Laden oder Restaurant, aber eventuell auch beim Arzt oder bei der Behörde. Siri Recap hingegen ist wahrscheinlich vor allem für Schwerhörige interessant, kann aber auch für verdolmetschte Gespräche spannend sein, da so nicht – besonders für Gehörlose zeitaufwändig – Notizen gemacht werden müssen.
Ähnliche Features gibt es bereits über Apps oder die integrierte Siri-Funktion – und auch andere Handyhersteller für das Android-Betriebssystem bieten Gesprächszusammenfassungen an. In diesem Fall dürfte der Zugriff über die Uhr besonders komfortabel sein. Es wird sich noch zeigen, wie gut das Feature in der Praxis ist.
Einen großen Haken haben diese Features vorerst noch: Sie sind nicht sofort verfügbar und zunächst nur für Englische Lautsprache. Weitere Sprachen wie Deutsche Lautsprache sollen aber „bald“ folgen.
Voraussetzungen: Für alle Audio Intelligence Features braucht man die neu erschienenen Apple Watches (Series 12 oder Ultra 4) – für Geräuscherkennung und automatische Musikerkennung ein iPhone ab Version 11. Für Live Rewind und Siri Recap braucht man mindestens ein iPhone 16.
