Erkundung der Fortschritte in der AR-Technologie und der Orion-Brille von Meta

Obwohl wir in einer reichen, dreidimensionalen (3D) Welt voller Daten und Informationen leben, verlassen sich die meisten der Geräte, die wir täglich nutzen, auf einen zweidimensionalen (2D) Bildschirm. Mit dem technologischen Fortschritt ändert sich dies jedoch langsam durch die Einführung von Innovationen wie Augmented Reality (AR). AR wird verwendet, um digitale Inhalte wie Bilder, Töne und Daten mit unserer realen Umgebung zu verschmelzen, wodurch diese interaktiver und ansprechender wird.

Künstliche Intelligenz (KI), insbesondere Computer Vision, ist eine treibende Kraft hinter Augmented Reality. Vision AI ermöglicht es AR-Geräten, ihre Umgebung durch Objekterkennung, Bewegungsverfolgung und Erkennung räumlicher Merkmale zu analysieren und zu interpretieren. In diesem Artikel untersuchen wir, wie Augmented Reality funktioniert und welche Anwendungen sie in Bereichen wie Bildung, Gesundheitswesen und Unterhaltung hat. Wir besprechen auch aktuelle Durchbrüche wie Metas neue Orion Augmented-Reality-Brille, die AR zugänglicher macht. Lass uns anfangen!

Abb. 1. Ein Schüler nutzt AR im Klassenzimmer (Quelle: elearningindustry.com).

Die Evolution von Augmented Reality#

Augmented Reality fügt der realen Welt durch Geräte wie Smartphones, Tablets oder AR-Brillen digitale Elemente wie Bilder, Videos oder 3D-Modelle hinzu. Wenn du beispielsweise die Kamera deines Handys auf einen leeren Tisch richtest, kann AR bewirken, dass dort eine virtuelle Kaffeetasse zu stehen scheint. AR kann unsere Wahrnehmung der Umgebung verbessern, indem sie computergenerierte Elemente mit dem verbindet, was wir im echten Leben sehen.

1968 schuf Ivan Sutherland, bekannt als der „Vater der Computergrafik“, das erste AR-Head-Mounted-Display in Harvard. Ursprünglich wurde AR in Bereichen wie Luftfahrt, Militär und industriellem Training eingesetzt. Die erste kommerzielle Nutzung von AR erschien 2008 mit einer interaktiven BMW-Mini-Werbung. Indem Benutzer eine gedruckte Zeitschriftenanzeige vor die Kamera eines Computers hielten, konnten sie ein digitales Modell des Autos auf ihrem Bildschirm sehen und dessen Bewegungen steuern, sodass es sich anfühlte, als würden sie im echten Leben mit dem Auto interagieren. Dies öffnete die Tür für den Einzug von AR in Branchen wie Marketing, Tourismus, Mode und Unterhaltung. Mit beliebten Gaming-Apps wie Pokémon Go im Jahr 2016 nahm die Verbreitung von AR zu. Es wird prognostiziert, dass der globale Markt für Augmented Reality bis 2034 etwa umwerfende 2.804,82 Milliarden US-Dollar erreichen wird.

Abb. 2. Ein Diagramm, das das Wachstum der globalen AR-Marktgröße zeigt.

Die Rolle von Computer Vision in AR#

Verschiedene Technologien wie Computer Vision, Sensoren und Machine Learning arbeiten zusammen, um immersive Augmented-Reality-Erlebnisse zu schaffen. Insbesondere Computer Vision bildet die Grundlage dafür, wie digitale Inhalte durch AR nahtlos in reale Umgebungen integriert werden. Hier ist ein genauerer Blick auf die verschiedenen Arten, wie Computer Vision zu AR beiträgt:

• Objekterkennung: Mithilfe von Computer-Vision-Techniken wie Objekterkennung, Bildsegmentierung und Objektverfolgung können AR-Systeme Objekte erkennen, indem sie deren Größe, Form und Farbe analysieren. Sobald sie identifiziert sind, können virtuelle Inhalte wie 3D-Modelle oder Text eingeblendet werden.
• Lokalisierung und Kartierung: Computer Vision kann für die simultane Lokalisierung und Kartierung (SLAM) verwendet werden, um die Position und Ausrichtung des Geräts in Echtzeit zu verfolgen und sicherzustellen, dass virtuelle Elemente für ein stabiles Erlebnis präzise mit der Sicht des Benutzers ausgerichtet bleiben.
• Gesten- und Bewegungserkennung: Vision AI kann verwendet werden, um Gesten, Gesichtsausdrücke und Bewegungen von Benutzern zu verfolgen, was natürliche Interaktionen mit virtuellen Inhalten in AR ermöglicht.
• Tiefenschätzung: Bildanalysen helfen AR-Geräten, zu verstehen, wie weit entfernt sich Objekte in der Umgebung befinden, indem sie analysieren, was sie sehen. Dies hilft dabei, virtuelle Elemente im richtigen Abstand zu platzieren, damit sie sich natürlich in die reale Welt einfügen und das gesamte AR-Erlebnis verbessern.
• Anpassung an die Umgebung: Computer Vision kann verwendet werden, um virtuelle Objekte an reale Bedingungen wie Lichtverhältnisse, Reflexionen und Schatten in AR anzupassen.

Nehmen wir zum Beispiel an, du verwendest eine AR-App, um eine digitale Skulptur in deinem Wohnzimmer anzusehen. Während du dein Handy oder dein AR-Headset bewegst, beginnt das Computer-Vision-System mithilfe der Objekterkennung Objekte im Raum wie dein Sofa oder deinen Couchtisch zu erkennen.

Gleichzeitig kartiert die SLAM-Technologie das Layout des Raums und verfolgt die Position deines Geräts, um sicherzustellen, dass die Skulptur an einem Ort fixiert bleibt. Wenn du näher herangeht, hilft die Tiefenschätzung der App dabei, die Größe der Skulptur anzupassen, sodass sie realistisch positioniert wirkt. Wenn du mit der Hand winkst, kannst du die Skulptur dank der Gestenerkennung drehen oder in der Größe verändern. Die App passt möglicherweise auch die Beleuchtung und die Schatten der Skulptur an die Lichtverhältnisse des Raums an, damit sie sich nahtlos in dein Wohnzimmer einfügt.

Orion: Meta’s Augmented-Reality-Brille#

AR macht rasant Fortschritte und Meta hat kürzlich seine Orion AR-Brille am 25. September 2024 auf dem Event Meta Connect 2024 angekündigt. Laut Metas CEO Mark Zuckerberg ist Orion die fortschrittlichste AR-Brille, die jemals hergestellt wurde, und vereint viele bahnbrechende Funktionen. Sie sieht aus wie eine ganz normale Brille, verfügt jedoch über immersive AR-Funktionen und bietet das bisher größte Sichtfeld, das jemals bei einer AR-Brille gesehen wurde.

Die Brille ist leicht, mit einem Rahmen aus Magnesium, ähnlich dem, was in F1-Autos verwendet wird, und verfügt über ein fortschrittliches Kühlsystem, das von NASA-Satelliten inspiriert ist, um Komfort zu gewährleisten. Sie verwendet ein Display der nächsten Generation aus maßgefertigtem Siliziumkarbid mit winzigen Projektoren, die Hologramme in verschiedenen Tiefen und Größen direkt vor dir erzeugen können.

Die Orion AR-Brille bietet Optionen für Sprachsteuerung, Handverfolgung, Eye-Tracking und eine Armband-Schnittstelle, die elektrische Impulse von deinen Muskeln empfängt, um AR-Elemente mit subtilen Bewegungen zu steuern. Das Armband fungiert als neuronale Schnittstelle, über die du mit einfachen Gesten mit der Brille interagieren kannst, was es zu einem Schlüsselelement des Gesamterlebnisses macht. Die Brille wird außerdem mit einem kleinen, taschengroßen Verarbeitungspuck geliefert, der dir unterwegs die nötige Rechenleistung liefert.

Abb. 3. Metas Orion AR-Brille, neurales Armband und Verarbeitungspuck.

Was Orion auszeichnet, ist die Integration von Meta AI, einem intelligenten Assistenten, der reale Objekte erkennen und hilfreiche Einblicke liefern kann. Wenn du beispielsweise eine Reihe von Zutaten ansiehst, kann Meta AI Rezepte vorschlagen. Du kannst auch jede Wand in einen Bildschirm zum Anschauen von Videos verwandeln, an holografischen Videoanrufen teilnehmen oder interaktive Spiele spielen, was Orion zu einem aufregenden Schritt bei AR-Erlebnissen macht.

Die Anwendungen der tragbaren AR-Technologie#

Tragbare AR-Technologie wie die Orion AR-Brille oder Headsets lässt dich Augmented Reality erleben, ohne ein Gerät halten zu müssen, im Gegensatz zur Nutzung eines Smartphones oder Tablets. Lass uns verschiedene Anwendungen durchgehen, bei denen tragbare AR einen Unterschied macht.

AR macht Bildung zugänglicher#

Viele Schüler lernen praktisch oder visuell, und Augmented Reality kann Lehrkräften helfen, interaktivere Lektionen zu gestalten. Mit tragbarer AR-Technologie wie Headsets oder Smart Glasses können Lehrkräfte und Lernende sich auf dynamischere Weise mit Bildungsinhalten auseinandersetzen, die es ihnen ermöglichen, jederzeit und überall zu lernen.

Diese tragbaren Geräte sind besonders in abgelegenen Gebieten nützlich, da viele AR-Anwendungen offline oder mit minimaler Konnektivität ausgeführt werden können, sobald die notwendigen Daten heruntergeladen wurden. Entwicklungsländer nutzen tragbare AR, um Schülern in Not eine qualitativ hochwertige Bildung zu bieten. In Ländern wie Ruanda, Nigeria und Südafrika hilft tragbare AR dabei, Schüler in abgelegenen Regionen zu unterrichten und erreicht allein in Ruanda über 500.000 Schüler.

Abb. 4. Ein Schüler an einem abgelegenen Ort in Afrika nutzt AR-Technologie zum Lernen (Quelle: nepad.org).

AR-Brillen für Gaming#

Die beliebteste Anwendung von AR ist im Gaming zu finden. Die Gaming-Branche beginnt zu erkennen, wie AR-Brillen Spiele immersiver und interaktiver machen können. Spieler können virtuelle Elemente durch AR in der realen Welt sehen, wodurch sie das Gefühl haben, wirklich Teil des Spiels zu sein. Beispielsweise können Spieler ihre Umgebung berührungslos erkunden und mit ihr interagieren, wodurch sich das Erlebnis natürlicher anfühlt.

Während AR-Gaming zuerst auf mobilen Geräten populär wurde – wie bei Pokémon Go, wo Spieler ihre Handykameras nutzten, um Pokémon zu fangen –, wird erwartet, dass der Wechsel zu AR-Brillen das Gaming noch fesselnder macht. Pokémon Go markiert einen wichtigen Meilenstein, da es das Potenzial von AR demonstrierte, indem es in nur 7 Tagen über 20 Millionen aktive Spieler erreichte.

Abb. 5. Spieler nutzen AR im Spiel Pokémon Go.

Wie AR Ärzten und Chirurgen hilft#

Dank Augmented Reality können Ärzte und medizinisches Fachpersonal medizinische Bilder in 3D abrufen und untersuchen. Tatsächlich können AR-fähige medizinische Bildgebungstools Ärzten helfen, die Anatomie von Patienten in einer 3D-Umgebung zu visualisieren. Eine klarere Visualisierung kann zu genaueren Diagnosen, besseren chirurgischen Ergebnissen und sichereren Eingriffen führen.

AR kann Fachleuten im Gesundheitswesen auch dabei helfen, eine personalisiertere und wirksamere Versorgung anzubieten, indem sie den Standort und das Ausmaß von Krankheiten identifizieren, chirurgische Eingriffe planen und Patienten ein besseres Verständnis ihrer Beschwerden vermitteln. Mithilfe von AR-Headsets können Chirurgen beispielsweise die Vitalwerte eines Patienten während eines medizinischen Eingriffs überprüfen, ohne mit mehreren Geräten und Bildschirmen hantieren zu müssen. Dadurch ist die Wahrscheinlichkeit geringer, dass sie Daten falsch lesen oder falsch interpretieren.

Abb. 5. Ein medizinischer Fachangestellter nutzt ein AR-Headset während einer Operation.

Wichtige Erkenntnisse#

Augmented Reality wird die Art und Weise verändern, wie wir mit der digitalen Welt interagieren. Durch die Kombination virtueller Elemente mit der realen Welt schafft AR ein immersiveres Erlebnis als herkömmliche Bildschirme. Meta’s Orion AR-Brille ist mit ihren fortschrittlichen Funktionen, dem komfortablen Design und den KI-Fähigkeiten ein großer Fortschritt in der AR-Technologie. Da AR in unserem täglichen Leben immer verbreiteter wird, können wir erwarten, dass die Grenze zwischen der physischen und der digitalen Welt verschwimmt, was zu neuen Möglichkeiten für Innovation und Kreativität führt.

Möchtest du mehr über KI erfahren? Sieh dir unser GitHub-Repository an, um unsere Beiträge zu KI und Computer Vision zu sehen, und vergiss nicht, dich mit unserer Community auszutauschen. Schau dir an, wie wir Branchen wie Fertigung und Landwirtschaft mit modernster KI-Technologie neu definieren.