Los modders enseñaron a los personajes de GTA V a responder al jugador en tiempo real con sus propias voces

Los modders decidieron combinar varias tecnologías de IA modernas para dar vida a los NPC.

Recientemente, Universal-Modder presentó una modificación para Grand Theft Auto V, gracias a la cual será posible comunicarse con los personajes. El proyecto «NPCTalk» es un sistema basado en inteligencia artificial que recibe datos de entrada a través de un micrófono y, en respuesta, emite respuestas generadas por los personajes en tiempo real.

Para ello, se utilizan las capacidades de Fish Audio, una herramienta para convertir texto en voz y clonar voces. El jugador podrá dirigirse a un personaje en Grand Theft Auto V y el sistema responderá en nombre del NPC con una voz clonada «en aproximadamente un segundo» (la documentación técnica informa de un retraso de 1,2 a 2,2 segundos). Este sistema también puede vincular la réplica del personaje con acciones y animaciones.

Los modders explicaron que reunieron todas las habilidades que la IA Claude aprendió en un solo repositorio, construido sobre modelos abiertos. Por ejemplo, utilizaron NVIDIA Nemotron ASR para la transcripción, Qwen 3.8 27B para el diálogo en tiempo real y Fish Audio Drama 3 para las voces clonadas.

Fuente de la imagen: Rockstar Games

El proyecto «NPCTalk» tiene una página en GitHub en el repositorio del usuario bajo el apodo christos-antono. Dado que no es un mod altamente especializado, sino una herramienta, otros entusiastas de la tecnología pueden intentar adaptarlo a otros juegos.