Apple Vision Pro und OpenUSD in 2023 & 2024 — Mit Thomas Riedel, Thomas Kumlehn

Kurze Videos und Talks von Gerhard Schröder rund um OpenUSD, USDZ und Augmented Reality im Apple-Universum — seit 2022.

→ Alle USD-Updates

Hallo und herzlich willkommen zu einer neuen Folge von USD Updates.

Das hätte eigentlich ein wundervolles Crossover-Special sein sollen zwischen dem Spacious Realities Podcast und USD Updates. Geplant war, eine Audio-Fassung aufbereitet von Thomas Riedel zu machen und die Uncut-Fassung des Video-Calls hier auf diesem Kanal.

In der Umsetzung gibt es ein kleines Problem. Thomas Riedel hat leider nicht sein richtiges Mikrofon eingeschaltet. Da wir fast 90 Minuten super Infos zu dem Thema USD im Jahr 2023, Ausblick auf 2024 und ganz viel zu Apple Vision Pro darüber geredet haben, gebe ich euch die Chance es trotzdem anzuhören und anzuschauen.

Am 16.01. gibt es die Folge Nummer 5 von USD Updates — ein Livestream mit Michael Stock.

Apple Vision Pro: Ankündigung und Philosophie

Hallo und herzlich willkommen zum Spatial Realities Podcast. Mein Name ist Thomas Riedl.

Heute soll es im Speziellen um den Apple-Kosmos gehen, denn es steht der Release der im letzten Jahr angekündigten Apple Vision Pro an. Herzlich willkommen Gerhard Schröder und Thomas Kumlehn.

Apple hat jahrelang immer die Produkte entwickelt, nichts gesagt — und dann erst, als es fertig war und schon in den Lagern, kurz vor Endverbraucher verschicken, dann erst darüber gesprochen. Hier hat Tim Cook schon Jahre vorher in Interviews und Pressemitteilungen etwas gemacht, was man als die Konkurrenz niedrig halten bezeichnen könnte.

Mark Gurman meinte, das Gerät solle Apple Reality heißen. Im Nachhinein lustig, wie fest er davon überzeugt war. Das Apple Gerät hieß natürlich nicht Apple Reality, sondern Apple Vision Pro.

Warum haben die das angekündigt und nicht sofort released? Ein Stück Hardware ist das eine, aber viel wichtiger ist, man braucht die Software, damit Leute das Ding auch haben wollen. Ein wichtiger Punkt war ja damals nicht das erste iPhone für sich, sondern ein Jahr später, dass sie den App Store rausbringen. Genauso wird es für Vision Pro sein.

USD, Nvidia und die Alliance for OpenUSD

Nvidia hat sein Commitment in Richtung USD schon vor Jahren verkündet. Die RTX-Grafikkarten verkaufen sich sehr gut im Industriesektor wegen der Technologie Omniverse. Alle Dateien, die im Omniverse gespeichert oder transferiert werden, sind in USD gespeichert.

Bei Apple ist es was anderes. Da geht es nicht darum, möglichst viele Grafikkarten zu verkaufen, sondern Nutzen zu bringen für den großen Endverbrauchermarkt. Deswegen war der Fokus auf Augmented Reality zuerst da.

Von Pixar, Apple, Nvidia, Autodesk und noch einer ganzen Reihe Unternehmen — alle unterstützen USD, in manchmal etwas unterschiedlichen Geschmacksrichtungen. Da gibt es jetzt einen Fahrplan, das in den nächsten zwei Jahren zu vereinheitlichen.

Siemens-Chef Roland Busch stand auf der Bühne der CES in Las Vegas und sprach mehrere Minuten darüber, dass Siemens jetzt der Alliance for OpenUSD beitritt. Diese Alliance läuft unter der Linux Foundation — neutral, eigenständig. Das hat inzwischen sehr große Kreise gezogen.

Spatial Video

iPhone 15 Pro mit Spatial Video: Das ist ein normales Stereo Video in einem speziellen Codec — der HVC Standard, Multi-View-Variante. Apple nutzt diesen Standard schon seit Jahren; jeder, der Live-Fotos auf dem iPhone kennt, kennt im Prinzip denselben Standard. Was so bemerkenswert ist: wir können heute schon Videos aufzeichnen, die für die Apple Vision Pro gedacht sind — mit einem einfachen Häkchen in den Einstellungen.

Warum Apple bewusst niederschwellig einstieg

Warum hat das mit dem Metaverse nicht geklappt? Weil es halt Deep VR war — in andere Welten hineinflüchten, schwierige Benutzerinterfaces, anstrengende Geräte. Apple sagt: nein, wir müssen die Leute so niedrigschwellig wie möglich abholen. Deswegen tun sie alles dafür.

Die ersten Erfahrungsberichte von Leuten, die das Ding auf der Nase hatten: wow, ich kann zaubern. Ich gucke da auf einen Button und klicke Daumen und Zeigefinger zusammen — das ist wie das Harry Potter Gefühl. Man gewöhnt sich angeblich sehr schnell dran. Eye-Tracking mit über 200 Frames per Second — das Team dahinter kommt aus Berlin, aufgekauft von Apple.

Die Technörter haben sich zunächst gewundert — das ist ja alles nur Fenster in 3D. Aber wenn man den Schritt zu weit springt, holst du die meisten Menschen nicht ab. Apple schielt nicht auf die paar Menschen, die bisher solche Geräte genutzt haben, sondern auf all die anderen Menschen.

USD wurde 2015 von Pixar entwickelt und Open Source gestellt. Nvidia nutzt USD als Kernformat für Omniverse im Industrial Metaverse. Apple nutzt USD als Grundlage für Augmented Reality auf iPhone, iPad und Apple Vision Pro. Drei sehr unterschiedliche Ansätze — Animation, Spatial Computing, Industrial Simulation — aber ein gemeinsames Dateiformat.

Die AOUSD stellt OpenUSD unter ein neutrales Dach — weg von Pixar hin zur Linux Foundation. Mitglieder sind unter anderem Nvidia, Apple, Pixar, Autodesk, BMW, Daimler und Siemens. Siemens-Chef Roland Busch erwähnte den Beitritt extra auf der CES-Keynote in Las Vegas — ein Zeichen, wie strategisch wichtig das Dateiformat für die Industrie geworden ist.

Das iPhone 15 Pro kann stereoskopische 1080p-Videos im HEVC-Multi-View-Format aufnehmen. Wer heute mit dem iPhone 15 Pro filmt, hat damit bereits Content für die Apple Vision Pro — ein bewusster Vorgriff von Apple, damit Nutzer schon vor dem Headset-Kauf Content für die Brille produzieren.