Start IT/Tech Der Orion-Prototyp von Meta bietet einen Einblick in unsere AR-Zukunft

Der Orion-Prototyp von Meta bietet einen Einblick in unsere AR-Zukunft

18
0
Der Orion-Prototyp von Meta bietet einen Einblick in unsere AR-Zukunft

Neben der eigentlichen Brille setzt Orion auf zwei weitere Ausrüstungsteile: einen 182 Gramm schweren „Wireless Compute Puck“, der in der Nähe der Brille bleiben muss, und ein Elektromyographie-Armband (EMG), mit dem man die AR-Schnittstelle mit einem steuern kann Reihe von Handgesten. Der Puck, den ich sah, war mit eigenen Kameras und Sensoren ausgestattet, aber Meta erzählte mir, dass sie das fernsteuerungsförmige Gerät seitdem vereinfacht haben, sodass es hauptsächlich für Konnektivität und Verarbeitung verwendet wird.

Als ich das dreiteilige Orion-Setup zum ersten Mal bei Connect sah, war mein erster Gedanke, dass es sich um einen interessanten Kompromiss handelte, um die Brille kleiner zu halten. Aber nachdem man alles zusammen ausprobiert hat, fühlt es sich wirklich überhaupt nicht wie ein Kompromiss an.

So sieht die Orion-Brille aus.

Die Brille war etwas breiter als mein Gesicht. (Karissa Bell für Engadget)

Sie steuern die Benutzeroberfläche von Orion durch eine Kombination aus Blickverfolgung und Gesten. Nach einer schnellen Kalibrierung beim ersten Aufsetzen der Brille können Sie durch die AR-Apps und -Menüs navigieren, indem Sie sich auf der Benutzeroberfläche umsehen und mit Daumen und Zeigefinger gleichzeitig tippen. Meta experimentiert seit Jahren mit handgelenkbasierten neuronalen Schnittstellen, und das EMG-Armband von Orion ist das Ergebnis dieser Arbeit. Das Band, das sich kaum mehr anfühlt als ein Stoffarmband, erkennt mithilfe von Sensoren die elektrischen Signale, die selbst bei subtilen Bewegungen Ihres Handgelenks und Ihrer Finger auftreten. Meta nutzt dann maschinelles Lernen, um diese Signale zu dekodieren und an die Brille zu senden.

Das mag kompliziert klingen, aber ich war überrascht, wie intuitiv sich die Navigation anfühlte. Die Kombination aus schnellen Gesten und Eye-Tracking fühlte sich viel präziser an als die Hand-Tracking-Steuerung, die ich in VR verwendet habe. Und obwohl Orion auch über Hand-Tracking-Fähigkeiten verfügt, fühlt es sich viel natürlicher an, schnell mit den Fingern zusammenzutippen, als die Hände vor dem Gesicht auszustrecken.

Meta führte mich durch eine Reihe von Demos, die die Fähigkeiten von Orion demonstrieren sollten. Ich habe Meta AI gebeten, ein Bild zu erstellen und Rezepte basierend auf einer Handvoll Zutaten auf einem Regal vor mir zu entwickeln. Letzteres ist ein Trick, den ich habe Mit der Ray-Ban Meta Smart Glasses, außer mit Orion, war Meta AI auch in der Lage, die Rezeptschritte an die Wand vor mir zu projizieren.

Ich habe auch ein paar Videoanrufe beantwortet, darunter einen überraschend lebensechten . Ich habe mir ein YouTube-Video angesehen, durch Instagram-Reels gescrollt und eine Antwort auf eine eingehende Nachricht diktiert. Wenn Sie Mixed-Reality-Headsets verwendet haben, kommt Ihnen vieles davon bekannt vor, und vieles davon unterscheidet sich nicht wesentlich von dem, was Sie mit VR-Headsets tun können.

Der Zauber von AR besteht jedoch darin, dass alles, was Sie sehen, mit der Welt um Sie herum überlagert wird und Ihre Umgebung immer vollständig sichtbar ist. Das habe ich besonders geschätzt, als ich zum Gaming-Teil der Komplettlösung kam. Ich habe ein paar Runden eines von Meta erstellten Spiels namens gespielt SternenguckerHier steuern Spieler ein Raumschiff im Retro-Look, indem sie ihren Kopf bewegen, um ankommenden Hindernissen auszuweichen, während sie mit Fingertipp-Gesten auf Feinde schießen. Während des gesamten Spiels und einer anschließenden AR-Runde PongWährend ich spielte, konnte ich problemlos ein Gespräch mit den Menschen um mich herum führen. Als jemand, der beim VR-Gaming leicht bewegungsübel wird, schätze ich es, dass ich mich nie desorientiert fühlte oder mir meiner Umgebung weniger bewusst war.

Die Displays von Orion basieren auf Siliziumkarbid-Linsen, Mikro-LED-Projektoren und Wellenleitern. Die eigentlichen Linsen sind klar, können jedoch je nach Umgebung dunkler werden. Einer der beeindruckendsten Aspekte ist das 70-Grad-Sichtfeld. Es war deutlich breiter und immersiver als das, was ich mit den AR-Brillen von Snap erlebt habe, die ein 46-Grad-Sichtfeld haben. Irgendwann hatte ich drei Fenster in einer Multitasking-Ansicht geöffnet: Instagram-Reels, einen Videoanruf und einen Nachrichten-Posteingang. Und obwohl ich mir durchaus der äußeren Grenzen des Displays bewusst war, konnte ich problemlos alle drei Fenster sehen, ohne meinen Kopf physisch zu bewegen oder meine Position anzupassen. Es ist immer noch nicht die allumfassende AR von Science-Fiction-Filmen, aber sie war breit genug, dass ich nie Schwierigkeiten hatte, den AR-Inhalt im Blick zu behalten.

Etwas enttäuschend war allerdings die Auflösung der Bilder von Orion. Bei 13 Pixeln pro Grad wirkten die Farben alle etwas gedämpft und der projizierte Text war merklich unscharf. Nichts davon war schwer zu erkennen, aber es war viel weniger lebendig als das, was ich darauf sah die eine Auflösung von 37 Pixel pro Grad haben.

Ming Hua, Vizepräsident für tragbare Geräte bei Meta, sagte mir, dass eine der obersten Prioritäten des Unternehmens darin bestehe, die Helligkeit und Auflösung der Displays von Orion zu erhöhen. Sie sagte, dass es bereits eine Version des Prototyps mit der doppelten Pixeldichte gebe, es gebe also guten Grund zu der Annahme, dass sich dies mit der Zeit verbessern werde. Sie ist auch optimistisch, dass Meta irgendwann in der Lage sein wird, die Kosten seiner AR-Technologie zu senken und sie schließlich auf etwas zu reduzieren, das „einem High-End-Telefon ähnelt“.

Als ich meine Demo im Meta-Hauptquartier verließ, wurde ich an das erste Mal erinnert, als ich 2016 zum ersten Mal einen Prototyp des drahtlosen VR-Headsets ausprobierte, das später als Quest bekannt werden sollte Zu diesem Zeitpunkt war selbst für einen seltenen VR-Benutzer sofort klar, dass das drahtlose Headset mit Raumverfolgung die Zukunft des VR-Geschäfts des Unternehmens war. Nun ist es kaum zu glauben, dass es eine Zeit gab, in der die Headsets von Meta noch nicht völlig kabellos waren.

Orion hat das Potenzial, noch viel größer zu werden. Nun versucht Meta nicht nur, einen bequemeren Formfaktor für Mixed-Reality-Hobbyisten und Gamer zu schaffen. Es bietet einen Einblick in die Zukunft und wie unser Leben aussehen könnte, wenn wir nicht mehr an unsere Telefone gebunden sind.

Im Moment ist Orion immer noch genau das: ein flüchtiger Blick. Es ist weitaus komplexer als alles, was das Unternehmen mit VR versucht hat. Meta hat noch viel Arbeit vor sich, bevor diese AR-gestützte Zukunft Realität werden kann. Aber der Prototyp zeigt, dass ein Großteil dieser Vision näher liegt, als wir denken.

Quelle link