Sony работает над созданием ИИ-персонажей. Уже есть прототип на базе Элой из Horizon Forbidden West — утечка
Элой можно было увидеть отвечающей на запросы с помощью синтезированного голоса и движений лица, работающих на основе ИИ.

Sony работает над созданием игровых персонажей, управляемых посредством искусственного интеллекта. Анонимный источник поделился с изданием The Verge роликом, демонстрирующим ИИ-версию Элой из Horizon Forbidden West.
Видео было также опубликовано на YouTube, но поспешно удалено по требованию компании по защите авторских прав Muso, представляющей интересы Sony Interactive Entertainment.
Ролик озвучивает Шарвин Рагхубардайал, директор по разработке программного обеспечения в Sony Interactive Entertainment, работающий над технологиями видеоигр, искусственным интеллектом, компьютерным зрением и технологиями лица для Advanced Technology Group студий PlayStation. На кадрах Рагхубардайал демонстрирует ИИ-версию Элой, которая может вести диалог с игроком через голосовые команды.
Элой реагировала на вопросы с помощью синтезированного ИИ голоса и движений лица как в демонстрационной среде, так и в полной версии игры Horizon Forbidden West. Рагхубардайал пояснил, что это лишь прототип, разработанный совместно с Guerrilla Games для внутренней демонстрации технологии.
В демонстрации технологии используется Whisper от OpenAI для преобразования речи в текст, а также GPT-4 и Llama 3 для диалогов и принятия решений. По словам Рагхубардаяла, Sony использует собственную внутреннюю систему Emotional Voice Synthesis (EVS) для генерации речи, а анимация лица на основе аудио реализована с помощью собственной технологии Sony под названием Mockingbird.
Демо запускалось на ПК, но, как отметил Рагхубардайал, Sony также экспериментировала с частичным использованием этой технологии непосредственно на консолях PS5 с «минимальными накладными расходами».
***
Источник изображения: The Verge