Visión artificial en los videojuegos: mejora la experiencia del jugador

Los videojuegos han avanzado mucho: de simples aventuras pixeladas a los enormes mundos inmersivos que los jugadores exploran hoy. De hecho, la idea de que una máquina pudiera pensar, o incluso jugar a un juego, se planteó seriamente por primera vez en la década de 1940.

Durante ese periodo, se presentó en la Exposición Universal una máquina creada por el físico Edward U. Condon. Podía jugar al Nim, un juego matemático de estrategia en el que dos jugadores se turnan para retirar objetos de distintos montones, con el objetivo de evitar coger el último. La máquina jugó miles de partidas contra los visitantes y ganó la gran mayoría, lo que despertó un interés temprano por la posibilidad de que las máquinas inteligentes participaran en juegos.

Hoy, esa primera visión está cobrando vida de nuevas formas. Uno de los avances más interesantes en los videojuegos es el uso de la visión por computador, una rama de la inteligencia artificial (AI). A medida que los juegos se vuelven más dinámicos y receptivos, la visión por computador permite a las máquinas interpretar y comprender la información visual, creando experiencias más inmersivas, interactivas y personalizadas.

En concreto, los modelos de visión por computador como Ultralytics YOLO11, conocidos por admitir tareas como la detección y el seguimiento de objetos, se están integrando en los videojuegos para mejorar la interacción y la capacidad de respuesta en tiempo real.

En este artículo, analizaremos más detenidamente cómo se utiliza la visión por computador en los videojuegos para mejorar la experiencia del jugador y dar forma al futuro del entretenimiento interactivo. ¡Empecemos!

Tendencias recientes de la AI y la visión por computador en los videojuegos#

Antes de analizar ejemplos de cómo se utiliza la visión por computador en la industria de los videojuegos, exploremos algunas de las tendencias recientes de la AI en este ámbito.

La AI generativa en la industria de los videojuegos#

Una de las principales tendencias es el uso de la AI generativa para hacer que los personajes de los videojuegos sean más inteligentes y receptivos. Un gran ejemplo es la creación del primer jefe controlado por AI en el próximo juego online MIR5.

En los videojuegos, una lucha contra un jefe suele ser un combate difícil contra un enemigo poderoso que aparece en momentos clave del juego, a menudo al final de un nivel o de la historia. Estos combates normalmente ponen a prueba las habilidades del jugador y están diseñados para resultar intensos y gratificantes.

Fig. 1. Una mirada al primer jefe controlado por AI.

Tradicionalmente, los personajes jefes siguen patrones predefinidos y utilizan el mismo conjunto de movimientos cada vez. Pero en MIR5, este nuevo jefe controlado por AI aprende de los jugadores contra los que lucha. Observa cómo se comportan, qué armas utilizan, cómo se mueven y en qué estrategias confían, y después adapta sus propios ataques para mantener el desafío del combate.

Por tanto, si vuelves a luchar contra el mismo jefe, puede que no actúe igual dos veces. Este tipo de comportamiento adaptativo hace que los combates parezcan más realistas y obliga a los jugadores a reaccionar sobre la marcha en lugar de limitarse a memorizar patrones.

La visión por computador en los videojuegos de realidad virtual#

Otra tendencia de la AI en los videojuegos es el uso cada vez mayor de la realidad virtual (VR). La VR es un tipo de tecnología que permite a los jugadores adentrarse en un mundo 3D totalmente digital mediante un visor y controles de movimiento. Crea la sensación de estar dentro del juego, en lugar de limitarse a observarlo en una pantalla.

Combinada con la visión por computador, la AI se utiliza para realizar un seguimiento más preciso de cómo se mueven y reaccionan los jugadores en los juegos de VR. Esto implica utilizar cámaras y sensores para capturar movimientos del mundo real, como giros de cabeza, gestos de las manos o incluso expresiones faciales, y traducir después esos datos en acciones dentro del juego. Esto ayuda a crear experiencias más fluidas y realistas en la VR, donde tus gestos y movimientos parecen estar realmente conectados con el mundo del juego.

Ejemplos reales de visión por computador en los videojuegos#

A continuación, veremos algunas formas interesantes en las que se utiliza la visión por computador en videojuegos populares. Ya sea para conseguir que la jugabilidad sea más interactiva o para desbloquear nuevas formas de controlar a los personajes, la AI basada en visión ya está cambiando nuestra forma de jugar.

Carreras de realidad mixta mediante visión por computador#

Hot Wheels: Rift Rally es un juego de carreras que combina un coche físico teledirigido (RC) con una experiencia de juego virtual. Los jugadores pueden conducir el coche RC por su casa, mientras la pantalla muestra una versión digital del coche realizando acrobacias como derrapes, saltos y acelerones. Aunque el coche real permanece en el suelo, el juego crea la ilusión de una acción a gran velocidad superponiendo efectos visuales sobre una señal de vídeo en directo.

Esta configuración se basa en la tecnología de realidad mixta (combina los mundos real y digital, permitiendo que los elementos físicos y virtuales interactúen en tiempo real) y en la visión por computador para hacer posible la experiencia. El coche RC está equipado con una cámara que escanea el entorno mientras se mueve. Los jugadores colocan marcadores visuales (puertas de cartón blancas y negras), llamados marcadores fiduciales, por la habitación, que el sistema utiliza como puntos de referencia.

La visión por computador ayuda al juego a reconocer estos marcadores, seguir la ubicación del coche y crear un mapa virtual del espacio. Esto permite al juego colocar con precisión contenido digital, como circuitos y obstáculos, dentro del entorno real, sincronizando el movimiento físico con lo que se muestra en pantalla.

Fig. 2. El coche RC está equipado con una cámara delante de un marcador fiducial.

Cómo adiestrar mascotas virtuales mediante AI basada en visión#

Peridot, un juego para móviles desarrollado por Niantic (la misma empresa responsable de Pokémon Go, uno de los primeros y más populares ejemplos de visión por computador en un juego de AR), utiliza la visión por computador y la realidad aumentada para hacer que cuidar de una mascota digital parezca una actividad integrada en el mundo real.

Los jugadores pueden cuidar de una criatura llamada Peridot, alimentándola, jugando y sacándola a pasear. Mientras te desplazas por tu casa o tu barrio, la mascota aparece en tu teléfono para explorar contigo, correr por el suelo, reaccionar ante objetos e incluso esconderse detrás de muebles reales.

Para hacerlo posible, el juego utiliza técnicas de visión por computador como el mapeo 3D y la segmentación semántica, mediante las que el sistema utiliza la cámara de tu teléfono para escanear y comprender el entorno. Esto ayuda a la mascota a reconocer y responder a distintas superficies, como distinguir la hierba del hormigón, o reaccionar ante obstáculos como sillas y árboles.

Fig. 3. Un vistazo a una mascota en Peridot.

Seguimiento de manos y espacios de realidad mixta compartidos#

Demeo, un RPG de mesa digital (juego de rol), utiliza funciones de realidad mixta para trasladar su jugabilidad al mundo real mediante visores como Meta Quest 2 y Quest Pro. Con una actualización reciente, el juego ahora admite el seguimiento de manos y la colocación conjunta, lo que permite a los jugadores utilizar movimientos naturales de las manos para interactuar con las piezas del juego y compartir el mismo espacio físico y digital con otras personas en partidas multijugador locales.

Por ejemplo, los jugadores pueden jugar a Demeo mientras acarician a su perro real: una señal pequeña pero significativa de cómo la realidad mixta puede combinar los espacios digitales y físicos. Estas funciones se basan en tecnologías de visión por computador. El seguimiento de manos funciona utilizando las cámaras integradas del visor para detectar e interpretar el movimiento y la posición de las manos del jugador, eliminando la necesidad de utilizar los controles tradicionales.

Fig. 4. Un ejemplo de la jugabilidad de Demeo.

Por su parte, la colocación conjunta utiliza anclajes espaciales y datos de nubes de puntos para mapear el entorno real, de modo que varios visores puedan sincronizar el mismo espacio virtual. Esto permite que los jugadores que están en la misma habitación vean el tablero de juego y a los demás en las mismas posiciones, creando el efecto de estar sentados alrededor de una mesa virtual compartida.

Ventajas y desventajas de la visión por computador en los videojuegos#

La visión por computador está cambiando la forma en que las personas interactúan con los videojuegos, al hacer que las experiencias parezcan más naturales e inmersivas. Permite a los jugadores utilizar gestos, movimientos corporales o incluso el seguimiento ocular para controlar la jugabilidad, y ayuda a los juegos a responder al entorno real en tiempo real. Estas funciones no solo mejoran la experiencia general, sino que también hacen que los juegos sean más accesibles para un grupo más amplio de jugadores.

Al mismo tiempo, la tecnología tiene algunas limitaciones. Puede consumir más batería y potencia de procesamiento, y puede no funcionar con la misma fluidez en condiciones de poca luz o en entornos muy concurridos. También hay consideraciones importantes relacionadas con la privacidad, ya que a menudo depende de la información capturada por las cámaras.

Sin embargo, a medida que la tecnología avanza, los desarrolladores están encontrando soluciones inteligentes para mejorar el rendimiento y abordar estas preocupaciones, haciendo que la visión por computador sea aún más útil y fiable en los videojuegos.

Conclusiones clave#

La visión por computador y la AI están cambiando la forma en que se crean y se juegan los videojuegos. Ya sea ayudando a los personajes a responder de forma más realista o haciendo que la jugabilidad parezca más conectada con el mundo real, estas tecnologías están abriendo posibilidades apasionantes. No solo hacen que los juegos tengan mejor aspecto, sino que también consiguen que parezcan más inteligentes y atractivos.

Desde títulos independientes hasta lanzamientos de grandes estudios, cada vez vemos a más desarrolladores experimentar con funciones basadas en la visión. A medida que estas herramientas sigan evolucionando, podemos esperar experiencias aún más creativas e inmersivas en el futuro de los videojuegos.

Explora nuestras páginas de soluciones para descubrir aplicaciones de la AI en la fabricación y la visión por computador en la atención sanitaria. Consulta nuestras opciones de licencia para empezar a crear tus propias innovaciones basadas en la visión.