Visión artificial en los videojuegos: Subiendo el nivel de la experiencia del jugador

Los videojuegos han recorrido un largo camino, desde las sencillas aventuras pixeladas hasta los mundos masivos e inmersivos que los jugadores exploran hoy en día. De hecho, la idea de que una máquina pudiera pensar, o incluso jugar a un juego, se planteó por primera vez de forma seria en la década de 1940.

Durante aquella época, una máquina creada por el físico Edward U. Condon se presentó en la Feria Mundial. Podía jugar al Nim, un juego matemático de estrategia en el que dos jugadores se turnan para retirar objetos de distintos montones, y el objetivo es evitar coger el último. La máquina jugó miles de partidas contra visitantes y ganó la gran mayoría, lo que despertó un interés inicial por la posibilidad de que las máquinas inteligentes participaran en juegos.

Hoy en día, esa visión inicial cobra vida de nuevas formas. Uno de los avances más emocionantes en los videojuegos es el uso de la computer vision, una rama de la inteligencia artificial (IA). A medida que los juegos se vuelven más dinámicos y receptivos, la computer vision permite a las máquinas interpretar y comprender información visual, creando experiencias más inmersivas, interactivas y personalizadas.

En concreto, los modelos de computer vision como Ultralytics YOLO11, conocido por su compatibilidad con tareas como la detección de objetos y el tracking, se están integrando en los videojuegos para mejorar la interacción y la capacidad de respuesta en tiempo real.

En este artículo, analizaremos más de cerca cómo se utiliza la visión artificial en los videojuegos para mejorar la experiencia del jugador y dar forma al futuro del entretenimiento interactivo. ¡Empecemos!

Tendencias recientes en IA y visión artificial para videojuegos#

Antes de sumergirnos en ejemplos de cómo se utiliza la computer vision en la industria de los videojuegos, exploremos algunas de las tendencias recientes de IA en este ámbito.

IA generativa en la industria de los videojuegos#

Una de las principales tendencias es el uso de IA generativa para hacer que los personajes de los juegos sean más inteligentes y receptivos. Un gran ejemplo es la creación del primer jefe impulsado por IA en el próximo juego online MIR5.

En los videojuegos, un combate contra un jefe suele ser una batalla desafiante contra un enemigo poderoso que aparece en momentos clave, a menudo al final de un nivel o de la historia. Estas luchas suelen poner a prueba las habilidades del jugador y están diseñadas para que resulten intensas y gratificantes.

Fig 1. Un vistazo al primer jefe de IA.

Tradicionalmente, los jefes siguen patrones programados, utilizando el mismo conjunto de movimientos siempre. Pero en MIR5, este nuevo jefe con IA aprende realmente de los jugadores contra los que lucha. Observa cómo se comportan los jugadores, qué armas utilizan, cómo se mueven y en qué estrategias confían, y luego adapta sus propios ataques para mantener el combate desafiante.

Así que, si vuelves a enfrentarte al mismo jefe, es posible que no actúe igual dos veces. Este tipo de comportamiento adaptativo hace que las batallas parezcan más realistas, obligando a los jugadores a pensar sobre la marcha en lugar de memorizar patrones.

Visión artificial en la realidad virtual (RV)#

Otra tendencia de la IA en los videojuegos es el uso cada vez mayor de la realidad virtual (VR). La VR es un tipo de tecnología que permite a los jugadores adentrarse en un mundo 3D totalmente digital utilizando unas gafas y controles de movimiento. Crea la sensación de estar dentro del juego, en lugar de limitarse a verlo en una pantalla.

Combinada con la computer vision, la IA se utiliza para rastrear con mayor precisión cómo se mueven y reaccionan los jugadores en los juegos de VR. Implica el uso de cámaras y sensores para capturar movimientos del mundo real, como giros de cabeza, gestos con las manos o incluso expresiones faciales, y luego traducir esos datos en acciones dentro del juego. Esto ayuda a crear experiencias más fluidas y realistas en la VR, donde tus gestos y movimientos se sienten verdaderamente conectados con el mundo del juego.

Ejemplos reales de visión artificial en los videojuegos#

A continuación, echemos un vistazo a algunas formas interesantes en las que se utiliza la visión artificial en videojuegos populares. Ya sea para hacer que la jugabilidad sea más interactiva o para desbloquear nuevas formas de controlar a los personajes, la IA visual ya está cambiando nuestra forma de jugar.

Carreras de realidad mixta mediante visión artificial#

Hot Wheels: Rift Rally es un juego de carreras que combina un coche físico teledirigido (RC) con una jugabilidad virtual. Los jugadores pueden conducir el coche RC por el salón de su casa, mientras la pantalla muestra una versión digital del coche realizando acrobacias como derrapes, saltos y acelerones. Aunque el coche real permanece en el suelo, el juego crea la ilusión de una acción a alta velocidad superponiendo efectos visuales sobre una transmisión de vídeo en directo.

Esta configuración se basa en la tecnología de realidad mixta (mezcla mundos reales y digitales, permitiendo que elementos físicos y virtuales interactúen en tiempo real) y en la computer vision para que la experiencia funcione. El coche RC está equipado con una cámara que escanea el entorno a medida que se desplaza. Los jugadores colocan marcadores visuales (puertas de cartón blancas y negras), llamados marcadores fiduciales, por la habitación, que el sistema utiliza como puntos de referencia.

La visión artificial ayuda al juego a reconocer estos marcadores, seguir la ubicación del coche y construir un mapa virtual del espacio. Esto permite al juego colocar con precisión contenido digital, como pistas y obstáculos, dentro del entorno del mundo real, sincronizando el movimiento físico con lo que se muestra en la pantalla.

Fig 2. El coche RC está equipado con una cámara delante de un marcador fiducial.

Entrenar mascotas virtuales mediante IA visual#

Peridot, un juego para móviles desarrollado por Niantic (la misma empresa detrás de Pokémon Go, uno de los ejemplos más antiguos y populares de visión artificial en un juego de RA), utiliza visión artificial y realidad aumentada para que el cuidado de una mascota digital se sienta arraigado en el mundo real.

Los jugadores pueden cuidar a una criatura llamada Peridot dándole de comer, jugando con ella y sacándola a pasear. A medida que te mueves por tu casa o barrio, la mascota aparece en tu teléfono para explorar contigo, corriendo por el suelo, reaccionando a los objetos e incluso escondiéndose detrás de muebles reales.

Para hacerlo posible, el juego utiliza técnicas de computer vision como el mapeo 3D y la segmentación semántica, donde el sistema utiliza la cámara de tu teléfono para escanear y comprender el entorno. Esto ayuda a que la mascota reconozca y responda a diferentes superficies, como distinguir el césped del hormigón, o reaccionar ante obstáculos como sillas y árboles.

Fig 3. Un vistazo a una mascota en Peridot.

Seguimiento manual y espacios compartidos de realidad mixta#

Demeo, un juego de rol (RPG) de tablero digital, utiliza funciones de realidad mixta para llevar su jugabilidad al mundo real a través de visores como Meta Quest 2 y Quest Pro. Con una actualización reciente, el juego ahora es compatible con el rastreo de manos y la colocación compartida, lo que hace posible que los jugadores utilicen movimientos naturales de las manos para interactuar con las piezas del juego y compartir el mismo espacio físico y digital con otros en sesiones multijugador locales.

Por ejemplo, los jugadores pueden jugar a Demeo mientras acarician a su perro real, un signo pequeño pero significativo de cómo la realidad mixta puede fusionar espacios digitales y físicos. Estas características son posibles gracias a las tecnologías de computer vision. El tracking de manos funciona utilizando las cámaras integradas del visor para detectar e interpretar el movimiento y la posición de las manos del jugador, eliminando la necesidad de mandos tradicionales.

Fig 4. Un ejemplo de la jugabilidad de Demeo.

Mientras tanto, la colocación compartida utiliza anclajes espaciales y datos de nubes de puntos para mapear el entorno del mundo real, de modo que varios cascos puedan sincronizar el mismo espacio virtual. Esto permite a los jugadores que están en la misma habitación ver el tablero de juego y a los demás en las mismas posiciones, creando el efecto de estar sentados alrededor de una mesa virtual compartida.

Pros y contras de la visión artificial en los videojuegos#

La computer vision está cambiando la forma en que las personas interactúan con los juegos al hacer que las experiencias se sientan más naturales e inmersivas. Permite a los jugadores utilizar gestos, movimientos corporales o incluso el seguimiento ocular para controlar la jugabilidad, al tiempo que ayuda a los juegos a responder al entorno del mundo real en tiempo real. Estas características no sólo mejoran la experiencia general, sino que también hacen que los juegos sean más accesibles para una gama más amplia de jugadores.

Al mismo tiempo, la tecnología tiene algunas limitaciones. Puede consumir más batería y potencia de procesamiento, y puede no funcionar tan bien en condiciones de poca luz o entornos muy concurridos. También hay consideraciones importantes en torno a la privacidad, ya que a menudo depende de la entrada de la cámara.

Sin embargo, a medida que la tecnología avanza, los desarrolladores están encontrando soluciones inteligentes para mejorar el rendimiento y abordar estas preocupaciones, haciendo que la visión artificial sea aún más útil y fiable en los juegos.

Conclusiones clave#

La visión artificial y la IA están cambiando la forma en que se crean y juegan los juegos. Ya sea ayudando a los personajes a responder de forma más realista o haciendo que la jugabilidad se sienta más conectada con el mundo real, estas tecnologías están abriendo posibilidades interesantes. No solo hacen que los juegos se vean mejor, sino que los hacen sentir más inteligentes y atractivos.

Desde títulos independientes hasta grandes lanzamientos de estudio, estamos viendo a más desarrolladores experimentar con funciones basadas en la visión. A medida que estas herramientas sigan creciendo, podemos esperar experiencias aún más creativas e inmersivas en el futuro de los videojuegos.

Explora nuestras páginas de soluciones para descubrir aplicaciones de IA en la fabricación y computer vision en el sector sanitario. ¡Echa un vistazo a nuestras opciones de licencias para empezar a crear tus propias innovaciones de visión!