Visão computacional nos jogos: elevar a experiência do jogador

Os jogos percorreram um longo caminho — de aventuras simples e pixelizadas aos enormes mundos imersivos que os jogadores exploram atualmente. Na verdade, a ideia de que uma máquina pudesse pensar, ou até jogar um jogo, foi considerada seriamente pela primeira vez na década de 1940.

Nessa época, uma máquina criada pelo físico Edward U. Condon foi apresentada na Feira Mundial. Ela conseguia jogar Nim, um jogo matemático de estratégia em que dois jogadores se revezam para remover objetos de diferentes pilhas, e o objetivo é evitar escolher o último. A máquina jogou milhares de partidas contra visitantes e venceu a grande maioria, despertando o interesse inicial pela possibilidade de máquinas inteligentes se envolverem em jogos.

Hoje, essa visão inicial está a ganhar vida de novas formas. Um dos desenvolvimentos mais empolgantes nos jogos é o uso da visão computacional, um ramo da inteligência artificial (AI). À medida que os jogos se tornam mais dinâmicos e responsivos, a visão computacional permite que as máquinas interpretem e compreendam informações visuais, criando experiências mais imersivas, interativas e personalizadas.

Especificamente, modelos de visão computacional como o Ultralytics YOLO11, conhecido pelo suporte a tarefas como deteção e seguimento de objetos, estão a ser integrados nos jogos para melhorar a interação e a capacidade de resposta em tempo real.

Neste artigo, vamos analisar mais de perto como a visão computacional está a ser usada nos jogos para melhorar a experiência dos jogadores e moldar o futuro do entretenimento interativo. Vamos começar!

Tendências recentes de AI e visão computacional nos jogos#

Antes de analisarmos exemplos de como a visão computacional está a ser usada na indústria dos videojogos, vamos explorar algumas das tendências recentes de AI neste setor.

AI generativa na indústria dos jogos#

Uma tendência importante é o uso de AI generativa para tornar as personagens dos jogos mais inteligentes e responsivas. Um ótimo exemplo é a criação do primeiro boss com tecnologia de AI no próximo jogo online MIR5.

Nos jogos, uma luta contra um boss é normalmente uma batalha desafiante contra um inimigo poderoso que aparece em momentos importantes do jogo, muitas vezes no final de um nível ou enredo. Estas lutas costumam testar as capacidades do jogador e são concebidas para serem intensas e gratificantes.

Fig. 1 Uma visão do primeiro boss com AI.

Tradicionalmente, as personagens boss seguem padrões predefinidos, usando o mesmo conjunto de movimentos todas as vezes. Mas, no MIR5, este novo boss com AI aprende efetivamente com os jogadores contra quem luta. Observa como os jogadores se comportam, que armas usam, como se movimentam e em que estratégias confiam, adaptando depois os seus próprios ataques para manter a batalha desafiante.

Assim, se voltar a lutar contra o mesmo boss, ele pode não agir da mesma forma duas vezes. Este tipo de comportamento adaptativo torna as batalhas mais realistas, obrigando os jogadores a pensar rapidamente em vez de simplesmente memorizarem padrões.

Visão computacional nos jogos de VR#

Outra tendência de AI nos jogos é o uso crescente da realidade virtual (VR). A VR é um tipo de tecnologia que permite aos jogadores entrarem num mundo totalmente digital e 3D através de um headset e de controlos de movimento. Ela cria a sensação de estar dentro do jogo, em vez de simplesmente o observar num ecrã.

Combinada com a visão computacional, a AI está a ser usada para acompanhar com maior precisão a forma como os jogadores se movimentam e reagem nos jogos de VR. Isso envolve o uso de câmaras e sensores para captar movimentos do mundo real, como virar a cabeça, gestos das mãos ou até expressões faciais, e depois traduzir esses dados em ações no jogo. Isto ajuda a criar experiências mais fluidas e realistas em VR, nas quais os seus gestos e movimentos parecem estar verdadeiramente ligados ao mundo do jogo.

Exemplos reais de visão computacional nos jogos#

Em seguida, vamos analisar algumas formas empolgantes como a visão computacional está a ser usada em videojogos populares. Seja para tornar a jogabilidade mais interativa ou para desbloquear novas formas de controlar personagens, a AI de visão já está a mudar a forma como jogamos.

Corridas de realidade mista com visão computacional#

Hot Wheels: Rift Rally é um jogo de corridas que combina um carro físico telecomandado (RC) com uma experiência de jogo virtual. Os jogadores podem conduzir o carro RC pelo espaço onde vivem, enquanto o ecrã mostra uma versão digital do carro a executar acrobacias como derrapagens, saltos e acelerações. Embora o carro real permaneça no chão, o jogo cria a ilusão de ação a alta velocidade ao sobrepor efeitos visuais a uma transmissão de vídeo ao vivo.

Esta configuração depende da tecnologia de realidade mista (que combina os mundos real e digital, permitindo que elementos físicos e virtuais interajam em tempo real) e da visão computacional para funcionar. O carro RC está equipado com uma câmara que analisa o ambiente à medida que se move. Os jogadores colocam marcadores visuais (portões de cartão preto e branco), chamados marcadores fiduciais, à volta da divisão, que o sistema usa como pontos de referência.

A visão computacional ajuda o jogo a reconhecer estes marcadores, acompanhar a localização do carro e construir um mapa virtual do espaço. Isto permite ao jogo posicionar com precisão conteúdos digitais, como pistas e obstáculos, no ambiente do mundo real, sincronizando o movimento físico com o que é apresentado no ecrã.

Fig. 2 O carro RC está equipado com uma câmara diante de um marcador fiducial.

Ensinar animais de estimação virtuais com AI de visão#

Peridot, um jogo para dispositivos móveis desenvolvido pela Niantic (a mesma empresa responsável por Pokémon Go, um dos primeiros e mais populares exemplos de visão computacional num jogo de RA), usa visão computacional e realidade aumentada para fazer com que cuidar de um animal de estimação digital pareça algo integrado no mundo real.

Os jogadores podem cuidar de uma criatura chamada Peridot, alimentando-a, jogando e levando-a a passear. À medida que você se desloca pela sua casa ou bairro, o animal aparece no seu telemóvel para explorar consigo, correndo pelo chão, reagindo a objetos e até escondendo-se atrás de móveis reais.

Para tornar isto possível, o jogo usa técnicas de visão computacional como mapeamento 3D e segmentação semântica, em que o sistema usa a câmara do seu telemóvel para analisar e compreender o ambiente. Isto ajuda o animal a reconhecer e responder a diferentes superfícies, como distinguir relva de betão, ou a reagir a obstáculos como cadeiras e árvores.

Fig. 3 Uma visão de um animal de estimação no Peridot.

Seguimento das mãos e espaços de realidade mista partilhados#

Demeo, um RPG de mesa digital (jogo de interpretação de papéis), usa funcionalidades de realidade mista para trazer a sua jogabilidade para o mundo real através de headsets como o Meta Quest 2 e o Quest Pro. Com uma atualização recente, o jogo passou a suportar o seguimento das mãos e a colocação conjunta, permitindo aos jogadores usar movimentos naturais das mãos para interagir com peças do jogo e partilhar o mesmo espaço físico e digital com outras pessoas em sessões multijogador locais.

Por exemplo, os jogadores podem jogar Demeo enquanto fazem festas ao seu cão real — um sinal pequeno, mas significativo, de como a realidade mista pode combinar espaços digitais e físicos. Estas funcionalidades são ativadas por tecnologias de visão computacional. O seguimento das mãos funciona através das câmaras integradas no headset, que detetam e interpretam o movimento e a posição das mãos do jogador, eliminando a necessidade de controladores tradicionais.

Fig. 4 Um exemplo da jogabilidade de Demeo.

Entretanto, a colocação conjunta usa âncoras espaciais e dados de nuvens de pontos para mapear o ambiente do mundo real, permitindo que vários headsets sincronizem o mesmo espaço virtual. Isto permite aos jogadores na mesma sala ver o tabuleiro do jogo e uns aos outros nas mesmas posições, criando o efeito de estarem sentados à volta de uma mesa virtual partilhada.

Vantagens e desvantagens da visão computacional nos jogos#

A visão computacional está a mudar a forma como as pessoas interagem com os jogos, tornando as experiências mais naturais e imersivas. Permite aos jogadores usar gestos, movimentos corporais ou até o seguimento ocular para controlar a jogabilidade, ao mesmo tempo que ajuda os jogos a responder ao ambiente do mundo real em tempo real. Estas funcionalidades não só melhoram a experiência geral, como também tornam os jogos mais acessíveis a um leque mais amplo de jogadores.

Ao mesmo tempo, a tecnologia tem algumas limitações. Pode consumir mais bateria e capacidade de processamento, e pode não funcionar tão bem em ambientes com pouca luz ou muito movimentados. Existem também considerações importantes relacionadas com a privacidade, uma vez que muitas vezes depende da entrada de dados da câmara.

No entanto, à medida que a tecnologia avança, os programadores estão a encontrar soluções inteligentes para melhorar o desempenho e responder a estas preocupações, tornando a visão computacional ainda mais útil e fiável nos jogos.

Principais conclusões#

A visão computacional e a AI estão a mudar a forma como os jogos são criados e jogados. Seja ajudando as personagens a responder de forma mais realista ou tornando a jogabilidade mais ligada ao mundo real, estas tecnologias estão a abrir possibilidades empolgantes. Não estão apenas a melhorar o aspeto dos jogos — estão a torná-los mais inteligentes e envolventes.

Desde títulos independentes a lançamentos de grandes estúdios, vemos cada vez mais programadores a experimentar funcionalidades baseadas em visão. À medida que estas ferramentas continuam a evoluir, podemos esperar experiências ainda mais criativas e imersivas no futuro dos jogos.

Explore as nossas páginas de soluções para descobrir aplicações de AI na indústria e visão computacional na área da saúde. Consulte as nossas opções de licenciamento para começar a criar as suas próprias inovações em visão computacional!