Utilizando IA generativa, los Dots en Peridot tienen ahora una capacidad mucho mayor para reconocer objetos del mundo real e interactuar con ellos, igual que las mascotas de verdad.
La actualización representa la primera aplicación a gran escala de la IA generativa en un juego de realidad aumentada.
La inteligencia artificial será fundamental para que los personajes digitales cobren vida en la realidad aumentada y para fomentar la participación a largo plazo en los juegos.
Desde los años 90 nos ha cautivado el encanto de las mascotas virtuales, desde los Tamagotchis a los Nintendogs, pasando por los Neopets. Hay algo enigmático en estos compañeros virtuales que siempre están con nosotros, esperando su próxima golosina o abrazo virtual. La tecnología ha avanzado mucho desde entonces y ha convertido a nuestros compañeros 2D en hiperrealistas en realidad virtual y aumentada, pero nuestro afecto por ellos sigue siendo el mismo.
Hoy, las mascotas virtuales son aún más reales en Peridot, el primer juego de realidad aumentada que utiliza IA generativa para dotar a las criaturas virtuales, o “Dots”, de la inteligencia necesaria para reaccionar de forma inesperada, sorprendente y encantadora a las cosas que encuentran en el mundo real, igual que haría una mascota de verdad.
Por ejemplo, igual que no sabes cómo reaccionaría tu cachorro al ver un gato en la calle, tu Dot también reaccionará de forma impredecible. ¿Gruñirá, ladrará o se lanzará tras él? Si dejas un plato de comida fuera, ¿robará tu Dot un bocado o se revolcará en las sobras?
Gracias a la IA generativa, los Dots de Peridot también mostrarán reacciones únicas, aleatorias, sorprendentes o simplemente adorables cuando se encuentren con nuevos objetos, dando la impresión de que los Dots están aprendiendo y comprendiendo el mundo que les rodea.
Otra primicia de Peridot
Peridot, que ya es el primer juego totalmente basado en la realidad aumentada, es también el primero en utilizar la IA generativa con el único propósito de hacer que las adorables criaturas sean aún más adorables. La IA generativa de Peridot ofrece una visión del futuro de los juegos basados en la realidad aumentada y la inteligencia artificial. Creemos que es una de las primeras, si no la primera, implementación de la IA generativa en un juego para móviles.
Con las técnicas de diseño de juegos anteriores, nuestros equipos habrían tenido que programar manualmente una gama limitada de reacciones para los Dots cuando se encontraran con diversas cosas en el mundo. Con la IA generativa, el equipo puede aumentar drásticamente los comportamientos posibles cuando los Peridots se encuentran con nuevos estímulos, por ejemplo, otro animal, un plato de comida o un ramo de flores.
Cómo funciona:
Paso 1: Entendiendo el entorno
Utilizando los algoritmos de IA de Niantic para visión informática, las imágenes del mundo real vistas a través de la cámara del usuario se convierten en formas 3D precisas, para que los Peridots puedan retozar en su espacio. Usando el ARDK de Niantic Lightship, los Peridots pueden reconocer una variedad de cosas como flores, comida, mascotas y muchos otros objetos y superficies del mundo real.
Paso 2: Pasar al LLM
A continuación, esas palabras se pasan a un gran modelo de lenguaje, en este caso un uso personalizado de Llama 2 de Meta, junto con información sobre las características y la personalidad del Peridot, si es extrovertido o tímido, su edad y su historia. A continuación, el backend de Peridot pregunta a Llama cómo podría responder la pequeña criatura lo que ha encontrado.
Paso 3: Generar la reacción.
Peridot tenía una oportunidad única de utilizar la IA para aprovechar una amplia biblioteca de animaciones sin usar que eran difíciles de aprovechar para condiciones ambientales precisas. Gracias al nuevo sistema que aprovecha la IA generativa, esas animaciones forman parte ahora de un número mucho mayor de reacciones posibles. Es como si el Dot aprendiera, se adaptara y demostrara personalidad como los seres vivos.
Por ejemplo, durante el proceso de pruebas, uno de los Dots de nuestro equipo encontró un plato de comida vacío y, en lugar de limitarse a olfatearlo, para su sorpresa, el Dot se revolcó en él.
Lo vemos como un primer ejemplo de cómo los diseñadores y productores de juegos pueden utilizar la IA generativa para hacer que los personajes de los juegos sean más realistas e interactivos. En términos más generales, a medida que los personajes de realidad aumentada evolucionen, tendrán que utilizar la IA no sólo para entender el mundo, sino también para reaccionar ante él y ante otras personas.
Para Peridot, el juego seguirá siendo una plataforma de experimentación de las aplicaciones de la IA y la RA. Nos entusiasma seguir superando los límites y hacer que estas criaturas cobren vida en nuestro mundo a través de dispositivos móviles, con la vista puesta en el hardware del futuro.
-El equipo de Peridot