Gran Turismo 7 Sophy ai Deepdive con investigadores de Sony AI

Aveske.gg se sentó con dos de las mentes muy talentosas detrás del programa Sony AI: Kaushik Subramanian, un científico de investigación de personal senior, y Takuma Seno, un científico de investigación senior. Esto es lo que tuvieron que decir sobre Sophy y el futuro de la tecnología para los corredores SIM.

Imagen: Sony AI

La entrevista de GT7 Sophy

Para comenzar y completar a aquellos que aún no sepan, ¿podrían explicar cómo funciona GT Sophy y cómo difiere de otros modelos más convencionales?​

“Gran Turismo Sophy es un agente de carreras de IA avanzado desarrollado a través de una colaboración entre Sony Ai, Polyphony Digital y Sony Interactive Entertainment. El objetivo de investigación inicial de GT Sophy fue crear el primer agente de IA sobrehuman para superar a los mejores jugadores del mundo en Gran Turismo Sport.

GT Sophy fue entrenado utilizando nuevas técnicas de aprendizaje de refuerzo profundo, incluidos algoritmos de aprendizaje de última generación y escenarios de capacitación desarrollados por Sony AI, Gtsporty aprovechando la infraestructura de juegos en la nube de SIE para capacitación a gran escala. El agente difiere de otros enfoques más convencionales, ya que aprende a competir por prueba y error a través de su propia experiencia.

El agente puede aprender el comportamiento objetivo entrenando en diferentes escenarios de carreras, mientras que los agentes de IA en el juego convencionales exhiben principalmente un comportamiento codificado a mano por los diseñadores de juegos. Debido a esto, GT SOPHY es más reactivo y robusto en una amplia gama de interacciones de usuario en el juego “. – Kaushik Subramanian

Configuración rival con Sophy AI.

Después de dos años de estar disponible, GT Sophy ha evolucionado para ser aún más flexible para que los corredores lo usen en más escenarios. ¿Qué tan difícil fue llegar a este punto? ¿Era un marco de tiempo más largo como este necesario para generar suficiente tamaño de muestra para que GT Sophy funcionara bien con aún más variables? ​

Constantemente buscamos formas de expandir las capacidades del agente. El entrenamiento de GT SOPHY para ser accesible para una gama más amplia de jugadores, mientras que cubrir muchas de las opciones disponibles en carreras personalizadas fue un desafío. A medida que desplegamos GT Sophy 2.0 en más pistas y continuamos aumentando la cantidad de autos que podría conducir, reunimos valiosos comentarios de la comunidad de jugadores sobre cómo les gustaría interactuar con él.

Para cubrir las carreras personalizadas, era importante que probáramos y refináramos al agente de IA en diversas condiciones de carrera para experimentar con las diferentes configuraciones de raza que los usuarios podrían seleccionar. Al mismo tiempo, trabajamos para mejorar la nave de carrera de GT Sophy con escenarios de entrenamiento actualizados (para cubrir la variedad de autos bajo diferentes configuraciones de carrera personalizadas), e iteramos sobre las funciones de recompensa y las arquitecturas de redes neuronales para mejorar la robustez del agente y satisfacer los altos estándares de carreras – Takuma Seno

Pantalla de configuración de la carrera de Sophy AI

Imaginamos que habría diferentes tamaños de muestra para automóviles que son menos populares para conducir, por lo que las bolas extrañas en particular. ¿Cómo cuenta el modelo para esto?​

Nuestro enfoque de entrenamiento se centra en poder conducir todos los autos en el juego igualmente bien. GT7 Tiene una variedad tan grande de automóviles con una amplia gama de especificaciones, por lo que hay algunos autos que representan un desafío de generalización para el agente. Esto se debe principalmente a lo única que es su configuración. Nuestros esquemas de entrenamiento actualizados nos permiten identificar los automóviles con los que el agente tiene dificultades y variar de manera adaptativa con qué frecuencia se seleccionan estos autos para dar al agente datos más específicos para aprender. – Takuma Seno

¿Cuáles son las principales diferencias entre Sophy 2.1 y qué había estado disponible antes de la actualización 1.57 de GT7?​

Con GT Sophy 2.1, los jugadores tienen un mayor control sobre su experiencia en carreras que en lanzamientos anteriores. Cuando GT Sophy 2.0 debutó como una característica completa en el juego en noviembre de 2023, los jugadores pudieron enfrentarse frente al GT Sophy usando más de 340 autos en nueve pistas diferentes, un paso significativo de las cuatro pistas y cuatro opciones de automóviles en el lanzamiento por tiempo limitado en febrero de 2023.

Esta nueva actualización ahora permite a los jugadores competir contra GT SOPHY usando más de 400 autos en 19 pistas. Pero el cambio más significativo es que pueden modificar las condiciones de la carrera, incluida la elección del número de vueltas y automóviles que participan en la carrera, personalizando los autos de GT Sophy y estableciendo tasas de consumo de neumáticos y combustible. El agente ha sido capacitado para conducir en cualquier condición que especifique el usuario. – Takuma Seno

¿Podría una tecnología avanzada como GT Sophy también usarse en escenarios de la vida real también, como los autos que conducen o las carreras de forma autónoma?​

Siempre estamos explorando nuevas posibilidades para GT SOPHY y no podemos comentar nada más con respecto a la funcionalidad del agente fuera de la actualización GT SOPHY 2.1. Sin embargo, como parte del continuo esfuerzo de Sony Ai para explorar desafíos de investigación interesantes en el juego AI, el verano pasado, lanzamos una investigación exploratoria que introdujo un agente de carreras superhumano cuyo aporte del sensor es puramente local para el automóvil.

El objetivo de esta investigación exploratoria era ver si podíamos entrenar a un agente RL para conducir, así como a los principales conductores humanos utilizando solo imágenes de juego como entrada. Poder aprender de los datos de imágenes del juego es un paso para generalizar las capacidades del agente RL. – Kaushik Subramanian

¿Hay un objetivo final para GT SOPHY, o está configurado para ser un modelo en constante evolución?​

Un simulador de alta fidelidad como Gran Turismo Ofrece varias oportunidades de investigación interesantes, tanto por expandir lo que GT Sophy puede hacer en el juego y superar los límites de lo que los agentes de aprendizaje de refuerzo profundo son capaces. Estamos constantemente explorando nuevas posibilidades para GT Sophy y disfrutamos de recibir comentarios del GT Jugadores para que podamos continuar probando y refinando las capacidades del agente de IA.

Creemos que siempre hay espacio para la exploración continua sobre la mejora de la carrera y la robustez del agente y brindar disfrute de las carreras al espectro completo de los jugadores de GT. – Kaushik Subramanian

Sophy Ai Táctico

¿GT SOPHY tiene la capacidad de reconocer si ha sido demasiado agresivo? A su vez, ¿puede reconocer si el jugador ha sido y busca “Payback”?

Trabajamos para asegurarnos de que el agente siempre funcione en su mejor momento. En el proceso de capacitación, podemos determinar cuán agresivamente se comporta el agente y hacer cambios para corregirlo si es necesario. Cuando se despliega en el juego, GT Sophy responde a señales instantáneas en situaciones de carreras; No incorpora memoria o adaptación en tiempo real. – Kaushik subramaniano

Ai en Sim Racing

Con estas respuestas, el futuro de Sophie AI ciertamente está en secreto, y muchas preguntas de implementación más allá de la creación real de la IA se cerraron casi de inmediato. Entonces, aunque se muestra una progresión impresionante, sin duda hay mucho que Sony Ai mantiene un secreto … ¡por ahora!

La pregunta de IA en las carreras de SIM ha sido bastante divisiva durante varios años, ya sea un disco sobre el cual SIM tiene la mejor IA o herramientas de entrenamiento de conductores. Superar turbo que acabamos de lanzar. La IA es inmensamente beneficiosa para los corredores de SIM y el mundo de los juegos de manera más amplia, y ¿Sophy está encabezando eso, en tu opinión?

Usas Gran Turismo 7’s ¿Sophy ai? ¿Hay alguna otra pregunta que desee responder? ¡Háganos saber en los comentarios a continuación!