Explorando avanços na tecnologia de RA e os óculos Orion da Meta

Embora vivamos em um mundo tridimensional (3D) rico e cheio de dados e informações, a maioria dos dispositivos que usamos diariamente depende de telas bidimensionais (2D). No entanto, à medida que a tecnologia avança, isso está mudando lentamente com a introdução de inovações como a realidade aumentada (RA). A RA é usada para misturar conteúdo digital, como imagens, sons e dados, com o nosso ambiente do mundo real, tornando-o mais interativo e envolvente.

A inteligência artificial (IA), especialmente a visão computacional, é uma força motriz importante por trás da realidade aumentada. A Vision AI torna possível que os dispositivos de RA analisem e interpretem seu ambiente ao detectar objetos, rastrear movimento e reconhecer características espaciais. Neste artigo, exploraremos como a realidade aumentada funciona e suas aplicações em campos como educação, saúde e entretenimento. Também discutiremos avanços recentes, como os novos óculos de realidade aumentada Orion da Meta, que estão tornando a RA mais acessível. Vamos começar!

Fig 1. Um estudante usando RA na sala de aula (Fonte: elearningindustry.com).

Link to this sectionA evolução da realidade aumentada#

A realidade aumentada adiciona elementos digitais, como imagens, vídeos ou modelos 3D, ao mundo real por meio de dispositivos como smartphones, tablets ou óculos de RA. Por exemplo, se você apontar a câmera do seu celular para uma mesa vazia, a RA pode fazer parecer que há uma xícara de café virtual sobre ela. A RA pode melhorar a forma como vemos o que nos rodeia ao misturar elementos gerados por computador com o que vemos na vida real.

Em 1968, Ivan Sutherland, conhecido como o "pai da computação gráfica", criou o primeiro display de RA montado na cabeça em Harvard. Inicialmente, a RA era usada em áreas como aviação, forças armadas e treinamento industrial. O primeiro uso comercial da RA apareceu em 2008 com um anúncio interativo da BMW Mini. Ao segurar um anúncio de revista impresso na frente da câmera de um computador, os usuários podiam ver um modelo digital do carro na tela e controlar seus movimentos, fazendo com que parecesse que estavam interagindo com o carro na vida real. Isso abriu as portas para a RA entrar em setores como marketing, turismo, moda e entretenimento. Com aplicativos de jogos populares como Pokémon Go em 2016, a adoção da RA aumentou. Projeta-se que o mercado global de realidade aumentada alcance cerca de 2,804.82 bilhões de dólares até 2034.

Fig 2. Um gráfico mostrando o crescimento do tamanho do mercado global de RA.

Link to this sectionO papel da visão computacional na RA#

Várias tecnologias, incluindo visão computacional, sensores e aprendizado de máquina, trabalham juntas para criar experiências imersivas de realidade aumentada. A visão computacional, em particular, forma a base de como o conteúdo digital é facilmente integrado em ambientes do mundo real através da RA. Aqui está um olhar mais atento às diferentes formas como a visão computacional contribui para a RA:

• Reconhecimento de objetos: Usando técnicas de visão computacional, como detecção de objetos, segmentação de imagem e rastreamento de objetos, os sistemas de RA conseguem reconhecer objetos analisando seu tamanho, forma e cor. Uma vez identificado, conteúdo virtual como modelos 3D ou texto pode ser sobreposto.
• Localização e mapeamento: A visão computacional pode ser usada para localização e mapeamento simultâneos (SLAM) para rastrear a posição e orientação do dispositivo em tempo real, garantindo que os elementos virtuais permaneçam alinhados com precisão à visão do usuário para uma experiência estável.
• Reconhecimento de gestos e movimento: A Vision AI pode ser usada para rastrear gestos, expressões faciais e movimentos do usuário, permitindo interações naturais com conteúdo virtual em RA.
• Estimativa de profundidade: A análise de imagem ajuda dispositivos de AR a entender a que distância os objetos estão no ambiente analisando o que veem. Isso ajuda a posicionar elementos virtuais à distância correta, fazendo com que se misturem naturalmente ao mundo real e melhorando a experiência geral de AR.
• Adaptação ambiental: A visão computacional pode ser usada para ajustar objetos virtuais para responder a condições do mundo real, como iluminação, reflexos e sombras em RA.

Por exemplo, digamos que você esteja usando um aplicativo de AR para visualizar uma escultura digital na sua sala de estar. À medida que você move seu telefone ou headset de AR, o sistema de computer vision começa a reconhecer objetos ao redor da sala, como seu sofá ou mesa de centro, usando object detection.

Simultaneamente, a tecnologia SLAM mapeia o layout da sala e rastreia a posição do seu dispositivo para garantir que a escultura permaneça fixa em um ponto. À medida que você se aproxima, a estimativa de profundidade ajuda o aplicativo a ajustar o tamanho da escultura, fazendo com que pareça posicionada realisticamente. Se você acenar com a mão, o reconhecimento de gestos pode permitir que você gire ou redimensione a escultura. O aplicativo também pode adaptar a iluminação e as sombras da escultura para corresponder às condições de luz da sala, fazendo com que ela se misture perfeitamente à sua sala de estar.

Link to this sectionOrion: os óculos de realidade aumentada da Meta#

A RA está avançando rapidamente e a Meta anunciou recentemente seus óculos de RA Orion em 25 de setembro de 2024, no evento Meta Connect 2024. Segundo o CEO da Meta, Mark Zuckerberg, o Orion é o óculos de RA mais avançado já criado, combinando muitos recursos de ponta. Eles parecem um par de óculos comum, mas vêm com capacidades de RA imersivas, oferecendo o maior campo de visão já visto em óculos de RA até agora.

Os óculos são leves, com uma armação feita de magnésio, semelhante ao que é usado em carros de F1, e um sistema de resfriamento avançado inspirado em satélites da NASA para maior conforto. Eles usam uma tela de última geração feita de carbeto de silício personalizado, com pequenos projetores que podem criar hologramas de diferentes profundidades e tamanhos bem à sua frente.

Os óculos de RA Orion vêm com opções de comandos de voz, rastreamento de mãos, rastreamento ocular e uma interface de pulseira que capta impulsos elétricos dos seus músculos para controlar elementos de RA com movimentos sutis. A pulseira atua como uma interface neural, permitindo que você interaja com os óculos usando gestos simples, tornando-a uma parte fundamental da experiência geral. Os óculos também vêm com um pequeno processador portátil de bolso que fornece a potência computacional necessária em qualquer lugar.

Fig 3. Óculos de RA Orion, pulseira neural e processador da Meta.

O que faz o Orion se destacar é sua integração com a Meta AI, um assistente inteligente que pode reconhecer objetos do mundo real e fornecer insights úteis. Por exemplo, se você olhar para um conjunto de ingredientes, a IA da Meta pode sugerir receitas. Você também pode transformar qualquer parede em uma tela para assistir a vídeos, participar de videochamadas holográficas ou jogar jogos interativos, tornando o Orion um passo empolgante nas experiências de RA.

Link to this sectionAs aplicações da tecnologia de RA vestível#

A tecnologia de RA vestível, como os óculos ou headsets de RA Orion, permite que você experimente a realidade aumentada sem precisar segurar um dispositivo, ao contrário do uso de um celular ou tablet. Vamos analisar diferentes aplicações onde a RA vestível está fazendo a diferença.

Link to this sectionA RA está tornando a educação mais acessível#

Muitos estudantes são aprendizes visuais ou práticos, e a realidade aumentada pode ajudar professores a criar aulas mais interativas. Com tecnologia de RA vestível, como headsets ou óculos inteligentes, professores e alunos podem interagir com conteúdo educacional de uma forma mais dinâmica, permitindo que aprendam a qualquer hora e em qualquer lugar.

Esses dispositivos vestíveis são especialmente úteis em áreas remotas porque muitos aplicativos de RA podem rodar offline ou com conectividade mínima após o download dos dados necessários. Países em desenvolvimento estão usando RA vestível para fornecer educação de qualidade para estudantes necessitados. Em países como Ruanda, Nigéria e África do Sul, a RA vestível está ajudando a educar estudantes em áreas remotas, alcançando mais de 500,000 estudantes apenas em Ruanda.

Fig 4. Um estudante em uma localização remota na África usando tecnologia de RA para estudar (Fonte: nepad.org).

Link to this sectionÓculos de RA para jogos#

A aplicação mais popular de RA é nos jogos. A indústria de jogos está começando a reconhecer como os óculos de RA podem tornar os jogos mais imersivos e interativos. Os jogadores podem ver elementos virtuais no mundo real através da RA, fazendo-os sentir como se fossem verdadeiramente parte do jogo. Por exemplo, os jogadores podem explorar e interagir com o que os rodeia sem usar as mãos, tornando a experiência mais natural.

Embora os jogos de RA tenham se tornado populares primeiro em dispositivos móveis, como com Pokémon Go, onde os jogadores usavam as câmeras dos seus celulares para capturar Pokémon, espera-se que a transição para óculos de RA torne os jogos ainda mais envolventes. Pokémon Go marca um marco importante porque demonstrou o potencial da RA ao alcançar mais de 20 milhões de jogadores ativos em apenas 7 dias.

Fig 5. Jogadores usando RA no jogo, Pokémon Go.

Link to this sectionComo a RA está ajudando médicos e cirurgiões#

Graças à realidade aumentada, médicos e profissionais da saúde podem acessar e estudar imagens médicas em 3D. De fato, ferramentas de imagem médica habilitadas para RA podem auxiliar os médicos na visualização da anatomia do paciente em um ambiente 3D. Uma visualização mais clara pode levar a diagnósticos mais precisos, resultados cirúrgicos aprimorados e procedimentos mais seguros.

A RA também pode ajudar profissionais de saúde a oferecer cuidados mais personalizados e eficazes ao identificar a localização e a extensão de doenças, planejar procedimentos cirúrgicos e fornecer aos pacientes uma melhor compreensão de suas condições. Por exemplo, usando headsets de RA, os cirurgiões podem revisar os sinais vitais de um paciente durante um procedimento médico sem ter que lidar com múltiplos dispositivos e telas de exibição. Ao fazer isso, eles têm menos chances de ler ou interpretar dados incorretamente.

Fig 5. Um profissional de saúde usando um headset de RA durante uma cirurgia.

Link to this sectionPrincipais pontos#

A realidade aumentada está pronta para mudar a forma como interagimos com o mundo digital. Ao combinar elementos virtuais com o mundo real, a RA cria uma experiência mais imersiva do que as telas tradicionais. Os óculos de RA Orion da Meta, com seus recursos avançados, design confortável e capacidades de IA, representam um grande passo à frente na tecnologia de RA. À medida que a RA se torna mais comum em nossas vidas diárias, podemos esperar que a linha entre os mundos físico e digital se torne tênue, levando a novas possibilidades de inovação e criatividade.

Quer aprender mais sobre IA? Confira nosso repositório GitHub para ver nossas contribuições para IA e visão computacional, e não se esqueça de se envolver com nossa comunidade. Veja como estamos redefinindo setores como manufatura e agricultura com tecnologia de IA de ponta.