NVIDIA и Remedy работают над технологией лицевой анимации с помощью нейросетей
Студия Remedy Entertainment, известная играми Alan Wake и Quantum Break, совместно с NVIDIA занимаются улучшением лицевой анимации, используемой в производстве видеоигр и фильмов с участием цифровых двойников актёров.
Студия Remedy Entertainment, известная играми Alan Wake и Quantum Break, совместно с NVIDIA занимаются улучшением лицевой анимации, используемой в производстве видеоигр и фильмов с участием цифровых двойников актёров.
Во время мероприятия Siggraph, компании представили программу облегчающую разработку (фреймворк), которая работает на основе записи актёра при помощи нейросети. Сначала записывается видео продолжительностью от 5 до 10 минут, которое обучает нейросеть. Далее нейросеть его обрабатывает, и выдаёт результат высокого качества. Процесс 3D-захвата полностью автоматизирован, и система значительно уменьшает трудозатраты. Отличные результаты получаются даже в самых проблемных местах, таких как, глаза и губы.
Данный фреймворк позволит экономить на кропотливой ручной работе 3D-аниматоров и сделает анимацию более качественной.