AWE24 USA, die größte VR/AR-Veranstaltung der Welt, ist gerade zu Ende gegangen. Sie waren nicht dabei? Keine Sorge, hier ist eine Zusammenfassung der interessantesten Dinge, die dort passiert sind.
AWE ist eine Veranstaltung, die sich den XR-Technologien widmet, darunter VR, AR, MR und seit kurzem auch KI. Es ist ein Ort, an dem Sie sich über die neuesten Forschungsergebnisse verschiedener Unternehmen informieren und interessante Menschen aus der Branche treffen können.
AWE organisiert Veranstaltungen in der ganzen Welt, die größte davon im Juni in den USA. Es gibt auch Veranstaltungen in Europa und Asien. Dieser Artikel konzentriert sich auf das Geschehen bei AWE24 USA.

Hat jemand EyeSight besser gemacht als Apple?
Was die AWE zu einer so interessanten Veranstaltung macht, ist die Tatsache, dass interessante Innovationen oder Technologien sowohl von kleineren als auch von größeren Ausstellern zu finden sind. Manche würden behaupten, dass die kleineren Aussteller die kreativsten und abenteuerlichsten sind, was durchaus seine Berechtigung hat. Hier ein Beispiel: Erinnern Sie sich an EyeSight von Apple, ein Hauptmerkmal des Apple Vision Pro? Es wurde kritisiert, weil die Helligkeit und die Auflösung zu gering waren und das Design allgemein eher uninteressant war.

Angesichts der vielen verbesserungswürdigen Bereiche sind einige Unternehmen Risiken eingegangen und haben versucht, sie tatsächlich zu verbessern. Eines dieser Unternehmen ist UltraReality. Dieses Unternehmen hat sich auf die Erstellung von 3D-Displays spezialisiert, um "fortschrittliche Funktionen auf den Frontbildschirmen von XR-Geräten" zu demonstrieren. Hier ist ein Video von ihrer Demonstration auf AWE24 USA:
Damit es hier keine Verwirrung gibt - diese "Brille" ist höchstwahrscheinlich nur das vordere Display, während die Apple Vision Pro ein vollständig eigenständiges Gerät mit zwei Prozessoren, Bildschirmen, Optiken und einem zusätzlichen Display auf der Vorderseite ist. Apple wird EyeSight wahrscheinlich in den kommenden Jahren so verbessern, dass es den Bildschirmen aus dem Film entspricht.
Logitechs MX Ink - Ein wirklich nützlicher VR-Stift für Meta Quest
Der MX Ink-Stift von Logitech ist der erste Controller eines Drittanbieters, der nativ mit der Meta Quest-Brille funktioniert. Die ersten Eindrücke zeigen, dass es sich um ein solides und lohnenswertes Produkt handelt.
Tony, ein Blogger, der über VR schreibt, hatte die Gelegenheit, den Stift auf der AWE24 USA zu testen und teilte seine Eindrücke in seinem Blog, Skarredghost. Laut Tony funktioniert der Stift hervorragend, vor allem auf harten Oberflächen. Er hat drei Tasten: Die mittlere Taste ist die Haupttaste, die man drückt, um in der Luft zu zeichnen. Tony erwähnte Probleme mit dem versehentlichen Drücken der anderen beiden Tasten, die je nach Anwendung unterschiedliche Funktionen haben, aber andere Benutzer hatten dieses Problem nicht. Wahrscheinlich ist es eine Frage der Gewöhnung.

Eine weitere frühe erschien eine Rezension von RoadToVR. Der Journalist Ben Lang hatte die Gelegenheit, das Produkt privat zu testen, und auch hier war es nicht ohne Lob. Der Logitech MX Ink-Stift hat eine druckempfindliche Spitze, die das Zeichnen auf harten Oberflächen natürlich erscheinen lässt. Interessanterweise ist auch die Taste zum Zeichnen in der Luft druckempfindlich. Der Preis des Logitech MX Ink Stylus beträgt $130, was recht günstig erscheint. Im Lieferumfang des Stiftes sind außerdem mehrere Zubehörteile enthalten, darunter das Inkwell Dock" (40 US-Dollar), eine Ladestation für den Stift, und die MX Mat" (50 US-Dollar), eine Matte, die laut Logitech ein papierähnliches Zeichenerlebnis" bietet.
Sony VR/AR - Goggles für Profis und Kreative
Die Brille wurde bereits im Januar auf der CES angekündigt, ein offizielles Veröffentlichungsdatum gibt es aber noch nicht. Trotz der Stille im Äther in den letzten Monaten hatten einige Leute bei AWE24 USA die Gelegenheit, die Brille auszuprobieren und ihr Feedback dazu zu geben.

Diese Brillen bieten 4K-Displays (die genaue Auflösung ist jedoch unbekannt), Passthrough-Farbkameras, Pancake-Optik, einen aufklappbaren Sucher und zwei einzigartige Controller. Ein Controller ähnelt einem mit dem Zeigefinger zu bedienenden Zeiger, während der andere ein kleiner Ring ist, der mit dem Daumen bedient wird. Die Brille wurde für Architekten und Designer entwickelt, die ihre Modelle in voller Größe betrachten möchten, aber das ist natürlich nicht alles, was die Brille kann.
Erste Eindrücke von UploadVR weisen auf ein schlechtes Sichtfeld (weniger als 100 Grad in der Diagonale) und eine unzuverlässige Tracking-Qualität für beide Controller hin. UploadVR hatte jedoch nur eine begrenzte Zeit mit der Brille und Software-Updates könnten möglicherweise die Tracking-Probleme beheben. Weitere Tests und Bewertungen sind erforderlich, um die Stärken und Schwächen dieser Brille vollständig zu verstehen.

FreeAim-Schuhe - omnidirektionale VR-Locomotion-Schuhe
Wenn Sie sich für VR interessieren, haben Sie wahrscheinlich schon von Laufbändern gehört, die speziell für die virtuelle Realität entwickelt wurden. Sie ermöglichen es Ihnen, sich in der VR frei zu bewegen, während Sie in der Realität relativ unbeweglich bleiben. Diese Laufbänder haben jedoch erhebliche Probleme. Sie sind teuer in der Herstellung, zu groß und haben oft Probleme, wie z. B. die Tatsache, dass das Laufband nicht immer die Kraft messen kann, mit der es Sie in seine Mitte bewegen sollte, wenn der Benutzer drastisch aufhört, sich zu bewegen oder zu laufen. Das führt dazu, dass man sich manchmal ein paar Meter rückwärts bewegt, obwohl man lange stillgestanden hat. Es gibt eine ganze Reihe von Problemen dieser Art, weshalb viele VR-Laufbänder für Verbraucher eher... gleitende Laufbänder sind, die viel einfacher zu bauen sind.

Das ist auch der Grund, warum einige Leute nach alternativen Wegen suchen, um das Problem der VR-Lokomotion zu lösen. Eine solche Innovation sind spezielle Schuhe, ein Konzept, das von der FreeAim auf AWE24. Tony aus SkarredGhost hat es bewertet und stellte fest, dass es zwar noch einige Probleme zu lösen gibt, die Zukunft dieser Art von Geräten aber vielversprechend aussieht. Hier sind einige wichtige Punkte aus seinem Bericht:
Stärken:
- Wenn man sich erst einmal daran gewöhnt hat, erscheint das Gehen ganz natürlich.
- Sie sind weniger sperrig und schwer im Vergleich zu Wettbewerbern wie EktoVR
Schwachstellen:
- Sicherheitsbedenken
- Laufen lernen braucht Zeit
- Probleme bei der Erkennung von Wanderungen
- Hohe Kosten - die Enterprise-Version wird für 5.000 Dollar verkauft, während FreeAim die Verbraucherversion für 1.000 Dollar anbieten will.
Xreal Air 2 Ultra mit Beam Pro
XReal ist ein Unternehmen, das für die Herstellung intelligenter Brillen mit Displays zur Anzeige von Inhalten bekannt ist. Ihre Brillen sind 0-DoF, was bedeutet, dass sich der Inhalt auf den Bildschirmen immer mit Ihnen dreht. Um dieses Problem zu lösen und eine Stufe höher zu gehen, hat das Unternehmen die XReal Beam angekündigt, eine Box mit einer Batterie und einem Snapdragon-Prozessor, der 3-DoF ermöglicht. Das bedeutet, dass der auf der Brille angezeigte Inhalt stationär bleibt, wenn Sie Ihren Kopf drehen, sich aber mit Ihnen bewegt, wenn Sie sich physisch durch den Raum bewegen.

XReal hat jedoch gerade sein neuestes Produkt, das XReal Beam Pro, vorgestellt. Es funktioniert immer noch wie eine spezielle "Box" mit einem Akku und einem Prozessor, aber es fühlt sich jetzt mehr wie ein Telefon an als nur eine Box. Technisch gesehen ist es ein Telefon, aber es soll es nicht ersetzen. Es hat einen Bildschirm für eine bessere Benutzeroberfläche und kann auch 3D-Videos und Fotos aufnehmen. Die Kamera hat einen 50-mm-Abstand, viel mehr als beispielsweise das iPhone 15 Pro.
Die wichtigste Fähigkeit, die XReal Beam Pro für seine Brille ermöglicht, ist jedoch der 6-DoF-Modus, der die XReal Air 2 Ultra von einer Smart Glass in eine vollwertige AR-Brille verwandelt. Mit 6-DoF können Inhalte im Raum platziert werden, egal ob man sich im Haus bewegt oder auf der Couch sitzt. Dies ist heute Standard für VR-Brillen und wird es auch für zukünftige AR-Brillen sein, aber die XReal Air 2 Ultra mit Beam Pro bietet diese Fähigkeit jetzt.
XReal war auf der AWE24 USA vertreten, um seinen Beam Pro mit dem XReal Air 2 Ultra vorzuführen. Eindrücke von der die ersten Ausstellungen sind positiv, und angesichts der Erfahrung von XReal mit intelligenten Brillen könnte daraus wirklich etwas werden.

HyperVision, VR-Brille mit riesigem Sichtfeld (FOV)
Wenn Sie diesen Artikel lesen, nehme ich an, dass Sie VR schon einmal ausprobiert haben. Ich lege meine Hand dafür ins Feuer, dass Ihnen (abgesehen von Begeisterung und Überraschung) als erstes das relativ kleine Sichtfeld (FOV) aufgefallen ist. Das ist selbst für die heutigen VR-Brillen eine Herausforderung, denn die meisten bieten ein Sichtfeld von etwa 100-110 Grad in der Horizontalen und 90-100 Grad in der Vertikalen. Im Vergleich dazu umfasst das menschliche Sichtfeld etwa 200 Grad horizontal und 120 Grad vertikal.
Einige Unternehmen haben versucht, dieses Problem zu lösen, wie z. B. Pimax. Ihre Brillen boten ein breites Sichtfeld, das bei einigen Modellen bis zu 180 Grad betrug. Sie stießen jedoch auf Probleme wie Verzerrungen, hohes Gewicht und Größe sowie eine geringere Auflösung aufgrund der riesigen Displays für VR-Brillen, was zu einer geringeren Pixeldichte führte. Die Verbesserung des Sichtfeldes ist mit verschiedenen Herausforderungen verbunden, was HyperVision dazu veranlasste, einen anderen Ansatz zu verfolgen.
Hypervision ist eine meiner bisherigen Lieblingsdemonstrationen bei AWE. Besonders interessant finde ich den 240-Grad-Prototyp, bei dem eine zusammengesetzte Optik verwendet wird, um ein Bild mit vollem Sichtfeld aus 4 Displays zu erzeugen. Der Stitch ist meiner Erfahrung nach während der Benutzung völlig unsichtbar, und ich habe meine Augen beim Suchen angestrengt. pic.twitter.com/cx2g3hePUo
- Ridge (@Ridge_XR) 19. Juni 2024
Anstatt zwei große Displays und Optiken unterzubringen, hat man sich für vier Displays und Linsen entschieden. Das sieht dann so aus:

Diese Brille, die derzeit auch stationär ausprobiert werden kann, bietet ein Sichtfeld von 240 Grad. Sie verwendet Mikro-OLED-Displays und vier "genähte" Linsen. Nach Benutzerder dieses Headset ausprobiert hat, ist die Linie, die die beiden verschiedenen Linsen voneinander trennt, völlig unsichtbar. Allerdings, wie er betonte Ben Lang in seinem Kommentar zu diesem Beitrag: Die Trennung könnte deutlicher sein, wenn die Brille in Bewegung getestet werden könnte.
Varjo Teleport
Wollten Sie schon einmal... teleportieren? Sicherlich hat jeder von uns schon einmal darüber nachgedacht, was passieren würde, wenn wir das könnten. Leider ist es immer noch nicht möglich - das ist keine Überraschung. Mit einer von Varjo entwickelten 3D-Scan-Methode, die realistische VR-Szenen nur mit einem iPhone erzeugt, ist dies jedoch möglich. Diese Szenen sind beschrieben worden als "erstaunlich gut" aussehend, wobei einige einem Traum ähneln und andere - etwas weniger gut indiziert - den Erwartungen nicht gerecht werden. Es hängt alles von der Qualität des Scans ab.
Erleben Sie die Kraft von Teleport in Aktion. Diese fotorealistische Aufnahme von Teleport by Varjo wurde mühelos mit nur einem iPhone erstellt und zeigt Bastian Altendorfers mit Werkzeugen ausgestattete Werkstatt für Iconic Bikes.
- Varjo (@varjodotcom) 20. Juni 2024
Entdecken Sie Teleport von Varjo: https://t.co/pbe2QFHLVA pic.twitter.com/PWqcZ3f7J3
OK, aber wo können die Benutzer ihre gescannte 3D-Umgebung betrachten und erkunden? Natürlich mit einer VR-Brille. Genauer gesagt mit der Brille von Varjo, der XR-4, der neuesten und fortschrittlichsten Brille des Unternehmens.
Varjo Teleport befindet sich derzeit in der "Vorveröffentlichungsphase" und wird in absehbarer Zeit nicht implementiert werden. Dieses Projekt befindet sich jedoch seit mehreren Jahren in der Entwicklung und wird ein wichtiger Schwerpunkt für das Unternehmen werden - das Warten lohnt sich auf jeden Fall.

UltraLeap auf Meta Ray-Ban Brillen mit "Event-Kameras"
UltraLeap ist ein Unternehmen, das für seine frühen Investitionen in die Handtracking-Technologie bekannt ist und noch immer als das Unternehmen mit der besten verfügbaren Handtracking-Qualität gilt. Bis heute hat jedoch keine der auf dem Markt erhältlichen Brillen die UltraLeap-Technologie direkt in ihre Kameras integriert. Zwar haben einige Brillen (in der Regel die der Enterprise-Sparte) die Technologie integriert, aber dies geschah über eine separate "Box", in der alle Handtracking-Kameras und -Sensoren an der Brille angebracht waren.
Tony von SkarredGhost hatte die Gelegenheit, eine Demo auszuprobieren mit der neuen Referenzbrille von Goertek mit integrierter UltraLeap-Technologie. Insgesamt war die Erfahrung positiv, obwohl Tony Probleme mit der Genauigkeit der Mikrobewegungen hatte - Handbewegungen, die subtile Gesten wie die Bewegung des Daumens über den Zeigefinger erkennen. Allerdings ist diese Demo vielleicht nicht die überzeugendste Demonstration von UltraLeap.

Noch interessanter ist die Integration des UltraLeap-Controllers in die Meta Ray-Ban-Brille zur Steuerung des Geräts. Im Gegensatz zur Verwendung von Handerkennungskameras (die für die Brille zu energieintensiv wären), wurde dies mit einer Technologie namens "Event-Kameras" erreicht.
Die Brille verfügte über einen Controller mit einer nach unten gerichteten Event-Kamera, so dass der Benutzer seine Hand bequem auf einem Knie oder einer anderen Oberfläche ablegen konnte. Die Nutzer konnten ihren Daumen über den Zeigefinger schieben, um die Musik zu wechseln. Laut Tonys Bericht war die Genauigkeit der Mikrobewegungen deutlich besser als bei der Demonstration mit der VR-Brille.

Aber Moment mal, was sind all diese Event-Kameras? Nun - es handelt sich um eine Technologie, die für zukünftige AR-Brillen geeignet sein könnte. Ereigniskameras, auch bekannt als Dynamic Vision Sensors (DVS), unterscheiden sich grundlegend von herkömmlichen bildbasierten Kameras. Anstatt Bilder in festen Intervallen zu erfassen, erkennen Ereigniskameras Veränderungen in der Szene asynchron. Jedes Pixel zeichnet unabhängig voneinander Helligkeitsänderungen auf und erzeugt so einen kontinuierlichen Strom von Ereignissen. Dies führt zu einer extrem hohen zeitlichen Auflösung und einer geringen Latenzzeit, wodurch sich Ereigniskameras ideal für sich schnell bewegende Szenen und schlechte Lichtverhältnisse eignen.
Ultraleap demonstriert die Gesteneingabe auf der Meta Ray-Ban-Brille mit einem zusätzlichen Sensor.
- UploadVR (@UploadVR) 19. Juni 2024
Details hier: https://t.co/oSvTcOGRAQ pic.twitter.com/A9OgFcE40r
Insgesamt war die Erfahrung bei der Verwendung von UltraLeap auf der Meta Ray-Ban-Brille Berichten zufolge recht gut. Die Verwendung von Ereigniskameras hatte jedoch auch Nachteile, darunter die Notwendigkeit eines großen Controllers auf einer Seite der Brille und die Verbindung mit einer externen "Box" über ein Kabel. Diese Probleme können verbessert werden, was in Zukunft zu kleineren Formen führen könnte.