Erkundung der Fortschritte in der AR-Technologie und der Orion-Brille von Meta

Obwohl wir in einer reichen, dreidimensionalen (3D) Welt voller Daten und Informationen leben, verlassen sich die meisten Geräte, die wir täglich nutzen, auf einen zweidimensionalen (2D) Bildschirm. Mit dem technologischen Fortschritt ändert sich dies jedoch langsam durch die Einführung von Innovationen wie Augmented Reality (AR). AR wird verwendet, um digitale Inhalte wie Bilder, Töne und Daten mit unserer realen Umgebung zu vermischen, was sie interaktiver und ansprechender macht.

Künstliche Intelligenz (KI), insbesondere Computer Vision, ist eine treibende Kraft hinter Augmented Reality. Vision AI ermöglicht es AR-Geräten, ihre Umgebung zu analysieren und zu interpretieren, indem sie Objekte erkennt, Bewegungen verfolgt und räumliche Merkmale identifiziert. In diesem Artikel erfährst du, wie Augmented Reality funktioniert und welche Anwendungen es in Bereichen wie Bildung, Gesundheitswesen und Unterhaltung gibt. Wir besprechen außerdem aktuelle Durchbrüche wie die neue Orion Augmented-Reality-Brille von Meta, die AR zugänglicher machen. Fangen wir an!

Abb. 1. Ein Schüler nutzt AR im Klassenzimmer (Quelle: elearningindustry.com).

Link to this sectionDie Evolution von Augmented Reality#

Augmented Reality fügt digitale Elemente wie Bilder, Videos oder 3D-Modelle zur realen Welt hinzu, und zwar über Geräte wie Smartphones, Tablets oder AR-Brillen. Wenn du zum Beispiel die Kamera deines Telefons auf einen leeren Tisch richtest, kann AR es so aussehen lassen, als stünde eine virtuelle Kaffeetasse darauf. AR kann unsere Wahrnehmung der Umgebung verbessern, indem es computergenerierte Elemente mit dem vermischt, was wir im echten Leben sehen.

1968 schuf Ivan Sutherland, bekannt als der „Vater der Computergrafik“, das erste am Kopf getragene AR-Display in Harvard. Ursprünglich wurde AR in Bereichen wie Luftfahrt, Militär und industrieller Ausbildung eingesetzt. Die erste kommerzielle Nutzung von AR erschien 2008 mit einer interaktiven BMW Mini-Werbung. Indem Benutzer eine gedruckte Zeitschriftenanzeige vor die Kamera eines Computers hielten, konnten sie ein digitales Modell des Autos auf ihrem Bildschirm sehen und dessen Bewegungen steuern, was sich so anfühlte, als würden sie im echten Leben mit dem Auto interagieren. Dies öffnete die Tür für AR in Branchen wie Marketing, Tourismus, Mode und Unterhaltung. Mit beliebten Gaming-Apps wie Pokémon Go im Jahr 2016 nahm die Verbreitung von AR zu. Es wird prognostiziert, dass der globale Augmented-Reality-Markt bis 2034 erstaunliche 2.804,82 Milliarden Dollar erreichen wird.

Abb. 2. Ein Diagramm, das das Wachstum der globalen AR-Marktgröße zeigt.

Link to this sectionDie Rolle von Computer Vision in AR#

Verschiedene Technologien, darunter Computer Vision, Sensoren und maschinelles Lernen, arbeiten zusammen, um immersive Augmented-Reality-Erlebnisse zu schaffen. Insbesondere Computer Vision bildet die Grundlage dafür, wie digitale Inhalte einfach über AR in reale Umgebungen integriert werden. Hier ist ein genauerer Blick auf die verschiedenen Möglichkeiten, wie Computer Vision zu AR beiträgt:

• Objekterkennung: Durch den Einsatz von Computer-Vision-Techniken wie Objekterkennung, Bildsegmentierung und Objektverfolgung können AR-Systeme Objekte erkennen, indem sie deren Größe, Form und Farbe analysieren. Sobald sie identifiziert sind, können virtuelle Inhalte wie 3D-Modelle oder Text überlagert werden.
• Lokalisierung und Kartierung: Computer Vision kann für die simultane Lokalisierung und Kartierung (SLAM) verwendet werden, um die Position und Ausrichtung des Geräts in Echtzeit zu verfolgen und sicherzustellen, dass virtuelle Elemente für ein stabiles Erlebnis präzise mit der Sicht des Benutzers ausgerichtet bleiben.
• Gestik- und Bewegungserkennung: Vision AI kann verwendet werden, um die Gesten, Gesichtsausdrücke und Bewegungen des Benutzers zu verfolgen, was natürliche Interaktionen mit virtuellen Inhalten in AR ermöglicht.
• Tiefenschätzung: Bildanalysen helfen AR-Geräten zu verstehen, wie weit Objekte in der Umgebung entfernt sind, indem sie analysieren, was sie sehen. Dies hilft dabei, virtuelle Elemente in der richtigen Entfernung zu platzieren, sodass sie sich natürlich mit der realen Welt vermischen und das gesamte AR-Erlebnis verbessert wird.
• Anpassung an die Umgebung: Computer Vision kann verwendet werden, um virtuelle Objekte an reale Bedingungen wie Lichtverhältnisse, Reflexionen und Schatten in AR anzupassen.

Stell dir zum Beispiel vor, du nutzt eine AR-App, um eine digitale Skulptur in deinem Wohnzimmer zu betrachten. Während du dein Smartphone oder dein AR-Headset bewegst, beginnt das Computer Vision System, die Objekte im Raum, wie dein Sofa oder den Couchtisch, mithilfe von Objekterkennung zu identifizieren.

Gleichzeitig kartiert die SLAM-Technologie das Layout des Raums und verfolgt die Position deines Geräts, um sicherzustellen, dass die Skulptur an einer Stelle fixiert bleibt. Wenn du näher gehst, hilft Tiefenschätzung der App, die Größe der Skulptur anzupassen, damit sie realistisch positioniert erscheint. Wenn du mit der Hand winkst, kann Gesternerkennung es dir ermöglichen, die Skulptur zu drehen oder deren Größe zu ändern. Die App könnte auch die Beleuchtung und Schatten der Skulptur an die Lichtverhältnisse des Raums anpassen, damit sie sich nahtlos in dein Wohnzimmer einfügt.

Link to this sectionOrion: Meta’s Augmented-Reality-Brille#

AR schreitet schnell voran und Meta kündigte kürzlich am 25. September 2024 auf dem Meta Connect 2024 Event seine Orion AR-Brille an. Laut Meta-CEO Mark Zuckerberg ist Orion die fortschrittlichste AR-Brille, die je hergestellt wurde, und kombiniert viele bahnbrechende Funktionen. Sie sieht aus wie eine normale Brille, ist aber mit immersiven AR-Fähigkeiten ausgestattet und bietet das größte Sichtfeld, das bisher bei einer AR-Brille gesehen wurde.

Die Brille ist leicht, hat einen Rahmen aus Magnesium, ähnlich dem in F1-Autos, und ein fortschrittliches Kühlsystem, das von NASA-Satelliten inspiriert wurde, um den Tragekomfort zu erhöhen. Sie verwendet ein Display der nächsten Generation aus maßgefertigtem Siliziumkarbid mit winzigen Projektoren, die Hologramme in verschiedenen Tiefen und Größen direkt vor deinen Augen erzeugen können.

Die Orion AR-Brille bietet Optionen für Sprachsteuerung, Hand-Tracking, Eye-Tracking und ein Armband-Interface, das elektrische Impulse deiner Muskeln aufnimmt, um AR-Elemente mit subtilen Bewegungen zu steuern. Das Armband fungiert als neuronale Schnittstelle, die es dir ermöglicht, mit der Brille durch einfache Gesten zu interagieren, was sie zu einem zentralen Bestandteil des Gesamterlebnisses macht. Die Brille wird außerdem mit einem kleinen, taschengroßen Prozessor-Puck geliefert, der dir die nötige Rechenleistung für unterwegs bietet.

Abb. 3. Meta’s Orion AR-Brille, neuronales Armband und Prozessor-Puck.

Was Orion besonders macht, ist die Integration mit Meta AI, einem intelligenten Assistenten, der reale Objekte erkennen und hilfreiche Einblicke geben kann. Wenn du dir zum Beispiel eine Reihe von Zutaten ansiehst, kann Meta AI Rezepte vorschlagen. Du kannst auch jede Wand in einen Bildschirm verwandeln, um Videos zu sehen, an holografischen Videoanrufen teilnehmen oder interaktive Spiele spielen, was Orion zu einem aufregenden Schritt in der Welt der AR-Erlebnisse macht.

Link to this sectionDie Anwendungen der tragbaren AR-Technologie#

Tragbare AR-Technologie wie die Orion AR-Brille oder Headsets lässt dich Augmented Reality erleben, ohne ein Gerät halten zu müssen, im Gegensatz zur Nutzung eines Smartphones oder Tablets. Lass uns verschiedene Anwendungen durchgehen, bei denen tragbare AR einen Unterschied macht.

Link to this sectionAR macht Bildung zugänglicher#

Viele Schüler lernen durch praktisches Ausprobieren oder visuell, und Augmented Reality kann Lehrern helfen, interaktivere Lektionen zu gestalten. Mit tragbarer AR-Technologie wie Headsets oder Smart-Brillen können Lehrer und Schüler auf dynamischere Weise mit Bildungsinhalten interagieren, was ihnen ermöglicht, jederzeit und überall zu lernen.

Diese tragbaren Geräte sind besonders in abgelegenen Gebieten nützlich, da viele AR-Anwendungen offline oder mit minimaler Konnektivität ausgeführt werden können, sobald die notwendigen Daten heruntergeladen wurden. Entwicklungsländer nutzen tragbare AR, um Schülern in Not eine qualitativ hochwertige Bildung zu bieten. In Ländern wie Ruanda, Nigeria und Südafrika hilft tragbare AR dabei, Schüler in abgelegenen Regionen zu unterrichten und erreicht allein in Ruanda über 500.000 Schüler.

Abb. 4. Ein Schüler an einem abgelegenen Ort in Afrika nutzt AR-Technologie zum Lernen (Quelle: nepad.org).

Link to this sectionAR-Brillen für Gaming#

Die beliebteste Anwendung von AR ist Gaming. Die Gaming-Industrie beginnt zu erkennen, wie AR-Brillen Spiele immersiver und interaktiver machen können. Spieler können virtuelle Elemente in der realen Welt durch AR sehen, was ihnen das Gefühl gibt, wirklich Teil des Spiels zu sein. Zum Beispiel können Spieler ihre Umgebung freihändig erkunden und mit ihr interagieren, was das Erlebnis natürlicher wirken lässt.

Während AR-Gaming zunächst auf Mobilgeräten beliebt wurde, wie bei Pokémon Go, wo Spieler ihre Handy-Kameras nutzten, um Pokémon zu fangen, wird erwartet, dass der Umstieg auf AR-Brillen das Gaming noch ansprechender macht. Pokémon Go markiert einen wichtigen Meilenstein, da es das Potenzial von AR aufzeigte, indem es in nur 7 Tagen über 20 Millionen aktive Spieler erreichte.

Abb. 5. Spieler nutzen AR im Spiel, Pokémon Go.

Link to this sectionWie AR Ärzten und Chirurgen hilft#

Dank Augmented Reality können Ärzte und medizinisches Fachpersonal auf medizinische Bilder in 3D zugreifen und diese studieren. Tatsächlich können AR-gestützte medizinische Bildgebungswerkzeuge Ärzten dabei helfen, die Anatomie von Patienten in einer 3D-Umgebung zu visualisieren. Eine klarere Visualisierung kann zu genaueren Diagnosen, verbesserten chirurgischen Ergebnissen und sichereren Eingriffen führen.

AR kann auch medizinischen Fachkräften helfen, eine persönlichere und effektivere Versorgung anzubieten, indem sie Ort und Ausmaß von Krankheiten identifizieren, chirurgische Eingriffe planen und Patienten ein besseres Verständnis ihrer Erkrankungen vermitteln. Zum Beispiel können Chirurgen mit AR-Headsets die Vitalwerte eines Patienten während eines medizinischen Eingriffs überprüfen, ohne mit mehreren Geräten und Bildschirmen hantieren zu müssen. Dadurch ist die Wahrscheinlichkeit geringer, dass sie Daten falsch lesen oder interpretieren.

Abb. 5. Ein medizinisches Fachpersonal nutzt während einer Operation ein AR-Headset.

Link to this sectionWichtige Erkenntnisse#

Augmented Reality wird die Art und Weise verändern, wie wir mit der digitalen Welt interagieren. Durch die Kombination virtueller Elemente mit der realen Welt schafft AR ein immersiveres Erlebnis als herkömmliche Bildschirme. Meta’s Orion AR-Brille ist mit ihren fortschrittlichen Funktionen, dem komfortablen Design und den KI-Fähigkeiten ein großer Fortschritt in der AR-Technologie. Da AR in unserem täglichen Leben immer verbreiteter wird, können wir erwarten, dass die Grenze zwischen der physischen und der digitalen Welt verschwimmt, was zu neuen Möglichkeiten für Innovation und Kreativität führt.

Möchtest du mehr über KI erfahren? Schau dir unser GitHub-Repository an, um unsere Beiträge zu KI und Computer Vision zu sehen, und vergiss nicht, dich mit unserer Community auszutauschen. Erfahre, wie wir Branchen wie Fertigung und Landwirtschaft mit modernster KI-Technologie neu definieren.