Posts Tagged ‘Vision Pro’

Wenn Worte keine Grenzen mehr kennen – Apples Live-Übersetzung lässt Europa miteinander sprechen

14. Dezember 2025

Seit dem 12. Dezember 2025 steht die Live-Übersetzung mit Apple AirPods nun auch Nutzerinnen und Nutzern in Europa offiziell zur Verfügung. Ich hab das Update gleich geladen und ausprobiert. Der Hammer!

Die Funktion, die zuvor in den USA getestet wurde, kombiniert fortschrittliche On-Device-Spracherkennung mit KI-gestützter Übersetzung in Echtzeit. Technisch basiert das System auf der Neural Engine der Apple H2- und H3-Chips, die Sprachsignale lokal verarbeiten und so Verzögerungen minimieren. Eine stabile Internetverbindung wird nur noch zur Synchronisierung komplexer Sprachmodelle benötigt, wodurch der Datenschutz auf hohem Niveau bleibt.

Apple analysiert das System Sprache in mehreren Verarbeitungsschritten:
1. Spracherkennung (ASR) – Umwandlung des Audiosignals in Text mittels neuronaler Netze.
2. Maschinelle Übersetzung (NMT) – Übersetzung des erkannten Textes über ein kontextsensitives Transformer-Modell.
3. Sprachausgabe (TTS) – Synthese der übersetzten Sprache in Echtzeit, abgestimmt auf die Stimmeinstellungen des Nutzers.
Apple setzt dabei auf On-Device Processing, um Latenzzeiten zu minimieren und Datenschutzstandards einzuhalten.

Im praktischen Einsatz aktivieren Nutzer die Übersetzung über Siri oder direkt in der Systemsteuerung der AirPods. Nach Auswahl der gewünschten Sprachen werden gesprochene Sätze in Echtzeit erkannt, übersetzt und über die Kopfhörer ausgegeben. In Kombination mit iPhone oder Vision Pro ermöglicht das System auch eine visuelle Transkription, die auf dem Display oder im Sichtfeld eingeblendet wird. Besonders bemerkenswert ist die niedrige Latenzzeit: Apple spricht von weniger als 300 Millisekunden zwischen gesprochener Eingabe und der übersetzten Wiedergabe, was eine natürliche Gesprächsdynamik erlaubt.

Die Übersetzung wird in über 40 Sprachen und Dialekten unterstützt, darunter Deutsch, Französisch, Italienisch, Spanisch, Japanisch und Mandarin. Neu ist die adaptive Umgebungserkennung: Durch die Analyse von Hintergrundgeräuschen und Gesprächssituationen optimieren die AirPods Lautstärke, Betonung und Sprachebene der Übersetzung automatisch. Das macht die Funktion auch in lauten Umgebungen wie Bahnhöfen oder Konferenzsälen zuverlässig einsetzbar.

Mit dieser europäischen Einführung setzt Apple einen weiteren Schritt in Richtung kontextbewusster, KI-gestützter Kommunikation. Die Kombination aus mobiler Rechenleistung, Spracherkennung und maschinellem Lernen in Echtzeit hebt die AirPods damit über ihre ursprüngliche Audio-Funktion hinaus – hin zu intelligenten Schnittstellen zwischen Menschen unterschiedlicher Sprachen. Und als Tourist kann ich verstehen, was der französische Kellner mir an den Kopf wirft, wenn mein Schulfranzösisch versagt.

Apple: Neue Möglichkeiten der Online-Präsentation bei Webinaren und Online-Schulungen

7. Juni 2023

Die Keynote zur WWDC von Apple-Chef Tim Cook ließ mich in vielerlei Hinsicht aufhorchen. Zu Vision Pro hab ich mich ja schon geäußert. Als Dozent für Veranstaltungen zum Thema Medienkompetenz finde ich die Neuerung bei den Themen Videokonferenzen, Webwaren und Online-Schulungen interessant. Online-Meetings gehören zu meinen Alltag.

Zum einen gibt es wohl in Vision Pro die Möglichkeit mit Standard-Software wie Teams, Zoom und Webex Seminare im VR-Raum abzuhalten. Da bin ich sehr gespannt darauf. Wie ich auf der Keynote gelesen und von Kollegen aus Cupertino gehört habe, ist der Avatar der Meetingsteilnehmer sehr präzise. Apple nennt sie Persona, eine digitale Darstellung, die durch Techniken des maschinellen Lernens erzeugt wird und Gesichts- und Handbewegungen in Echtzeit darstellt. Aber das kommt ja erst 2024 und wird sicherlich aufgrund des Preises von 3500 Euro für Vision Pro zunächst kein Massenmarkt.

Für den Rest von uns
Interessanter ist da schon das neue Mac-Betriebssystem. Es heißt macOS Sonoma und kommt ab Herbst als Final auf den Mac, die öffentliche Beta kommt nächsten Monat.

macOS Sonoma bringt verbesserte Features für Videokonferenzen, mit denen sich Inhalte interessanter teilen lassen – egal in welcher Videokonferenz-App. In der Keynote nannte Apple die üblichen Verdächtigen Teams, Zoom und Webex. Mit dem neuen Videoeffekt Moderatorenmaske werden Anwender über ihren geteilten Inhalten angezeigt und sind dadurch präsenter. Das musste ich bisher mit Zusatzsoftware machen, damit ich bei meinen Online-Schulungen nicht hinter der Präsentation untergehe oder nur als kleine Kachel erscheine. Künftig kann ich mich via Moderatorenmaske in den Vordergrund meiner Präsentation schalten und meinen Zuhörern näher sein und meine Rolle als Speaker deutlich besser ausüben. Wahrscheinlich bringt der Einsatz von Greenscreen und Licht noch bessere Effekte – das gilt es auszuprobieren.

Außerdem kann ich mich mit Reaktionen ausdrücken, wie ich oder meine Zuhörer sich fühlen, indem wir nahtlos Ballons, Konfetti, Herzen und mehr in das Videobild einfügen. Das ist sicherlich eher eine Spielerei und wird sich der Praxis zeigen, wie es angenommen wird. Im Moment gibt es Herzchen, Klatschen usw. meist am Ende einer Präsentation. Diese Reaktionen lassen sich auch per Handgeste auslösen. Die verbesserte Auswahl zur Bildschirmfreigabe macht es einfacher, bei Videoanrufen Inhalte aus Apps zu teilen. Anwender können dazu auf die grüne Taste oben links in der App klicken. So wird das Teilen von Inhalten aus offenen Fenstern ganz leicht, verspricht Apple.

Groß auf dem Fernseher
Zudem gibt es ein Update für tvOS 17, die Software für Apple TV, was aber wohl nur auf Apple TV 4K laufen wird. Ab diesem Herbst können Anwender on Apple TV 4K die neue FaceTime App auf dem Apple TV nutzen und Anrufe direkt von ihrem Apple TV aus starten oder Anrufe auf dem iPhone oder iPad beginnen und sie dann an ihr Apple TV übergeben. FaceTime auf dem Apple TV nutzt die Vorteile der Kamera-Übergabe und verbindet sich drahtlos mit dem iPhone oder iPad der Nutzer. Es greift dann auf die Kamera und das Mikrofon des Geräts zu und bringt alle Teilnehmer auf dem Fernseher zusammen. Das ist für reine Apple-Umgebungen interessant. Vielleicht nutzen wir dieses Feature im familiären Umfeld, ob es Teilnehmer von meinen Seminaren machen, bleibt abzuwarten.

Revolution statt Evolution: Apple kommt mit Vision Pro

6. Juni 2023

Jetzt ist die Katze aus dem Sack: Vision Pro lautet die Weiterentwicklung des Computers. Vorgestellt durch Apple auf der Entwicklerkonferenz WWDC. Es ist nicht nur eine AR/VR-Brille, sondern es ist die konsequente Weiterentwicklung eines neuen, eigenen Ökosystems mit Rechner inside.

Die technischen Daten von Prozessor, Linsen, Kameras lassen sich von der Apple-Website abrufen. Mir geht es hier mehr um die Vision hinter der Vision Pro. Ich kenne nur die Präsentation von der WWDC und ein paar Stimmen von Kollegen, die vor Ort in Cupertino waren. Ich habe das Headset noch nicht live gesehen, es soll ja 2024 in den US-Verkauf gehen. Preis 3500 US-Dollar – das ist ne Stange Geld, aber kein Vergleich was mich Macs in früherer Zeit gekostet haben.

Im Web lese ich von Taucher- oder Skibrille und was das für ein seltsames Design wäre. Erinnern wir uns an die Häme als die AirPods vorgestellt wurden und die Kritiker lachten, die würden niemals durch Wattestäbchen Musik hören? Und heute?
Vision Pro ist mehr als nur eine Brille. Es ist laut Tim Cook eine „neue Art von Computer, der die Realität erweitert, indem er das Reale und das Digitale naht­los miteinander vermischt.“ Große Worte, aber so muss es wohl sein. Wenn das wirklich klappt, dann ist es eine wirkliche Neuerung: Revolution statt Evolution – und ich bin mir sicher, Apple zeigt als Technologieführer wo der Hammer hängt. Apple erfindet sich wieder neu.

Und diese Aussage von Tim Cook zeigt, wie sehr er mit Steve Jobs verbunden war und ihn verstanden hat. Steve Jobs meinte einst: „Einige Leute wissen nicht, was sie wollen, bis man es ihnen zeigt.“ Dieses Zitat wird oft als Ausdruck von Jobs‘ Ansatz zur Produktentwicklung bei Apple verwendet, bei dem das Unternehmen bestrebt war, revolutionäre Produkte zu schaffen, die die Bedürfnisse der Kunden erfüllen, noch bevor sie sich selbst dieser Bedürfnisse bewusst waren. Jobs glaubte daran, dass es nicht ausreicht, Kunden nur nach ihren Wünschen zu fragen, sondern dass wahre Innovation darin besteht, Produkte zu schaffen, von denen die Menschen nicht einmal wussten, dass sie sie brauchen würden. Und natürlich lese im im Netz, die ewigen Nörgler. Aber genau so ein Produkt wird Vision Pro werden, da bin ich mir sicher. Ein Produkt von dem ich noch gar nicht weiß, wie sehr ich es brauchen werde.

Vision Pro wird Folgen haben. Wenn ich höre, dass Disney einer der ersten Content-Partner ist, wird die Luft für Kinos und Beamerhersteller dünner. Auf Disney werden Netflix und Co folgen. Wenn Vision Pro Medieninhalte in hoher Auflösung und Größe vor meinen Augen abspielt, dass wird sich die Unterhaltungsindustrie verändern. Schon jetzt bin ich begeistert, vom Gaming im 360 Grad Raum durch meine Sony VR2 – wie aufregend kann das erst durch Vision Pro werden? Ach ja, die 3D-Wiedergabe brauche ich als Sehbehinderter persönlich nicht, hoffe aber, dass Brillenträger mit der Vision Pro gut zurecht kommen. Tim Cook und der Leiter der Apple-Design-Abteilung Richard Howarth sind ja auch Brillenträger. In kleinen Räumen oder Bienenwaben-Appartements wird auf einmal alles viel, viel größer. Die Brille öffnet größere Räume, vielleicht auch größere Räume der Fantasie?

Ich bin als digitaler Nomade gewohnt, irgendwo zu arbeiten, wo es einen Netzempfang gibt. Da wird das System auch in meiner mobilen Arbeitsumgebung interessant. Vision Pro ist schließlich ein leistungsfähiger Computer und nicht nur eine VR/AR-Brille. Apple liefert durch einen eigenen App-Store die entsprechenden Apps fürs autonome Arbeiten (an denen Apple freilich gut verdienen wird). Und ich kann, so zumindest in der Präsentation meine bestehende Hardware wie MacBook Pro ins Headsystem einbinden. In der Präsentation wurde Apple eigene Software-Programme wie Keynote oder Mail gezeigt, aber auch Microsoft Word und andere Office-Teile.

Reizvoll finde ich die Konferenzen mit eigenem Avatar, die nicht so Nintendomäßig aussehen wie die Meta-Variante on Horizont World. Netter Sidekick: Das Wort Metaverse fiel bei Apple nicht ein einziges Mal, aber ich bin sicher, Mark Zuckerberg hat die Präsentation genau verfolgt und bohrt die Quest x sicher schon auf. Etwas nervös werde ich allerdings, dass Cook auch das Wort AI/KI nicht einmal gesagt hat. Der Einsatz von Präsentationssoftware wie Webex, Teams oder Zoom wurden angekündigt und das wird Arbeiten in virtuellen Räumen verändern.

Die Keynote der WWDC muss sich erst einmal setzen lassen. Neben neuen Macs, neuen OS für iPhone, iPad, Mac und Watch nun noch Vision Pro. In den nächsten Tagen und Wochen werden wir uns mit der veränderten Welt beschäftigen. Ich fang an zu sparen und freue mich als Fan-Boy auf weitere Innovationen. Alles wird gut.