Я обычно высказываюсь категорически против нейрослопа, но здесь скажу пару слов в защиту
Работа этих штук сильно зависит от датасета для обучения модели. Если датасет из чего попало, то во время работы тоже будет что попало, как в демонстрации. Что нужно сделать, чтобы не как попало было? Нужно собрать отдельный датасет и обучить нейронку конкретно на нём. И нет, в случае с Грейс Эшкрофт это НЕ ДОЛЖНА БЫТЬ Джулия Пратт как она есть.
Разрабы должны использовать для датасета high poly, которую скульптят в zbrush на основе 3d сканов. В таких штуках на одно только лицо приходятся сотни миллионов полигонов. Каждая морщинка делается честной геометрией. В теории каждую из них можно даже реалистично анимировать. Ниже просто пример из гугла. Кому-то эта женщина может показаться чересчур старой и морщинистой, но это нормальное впечатление от high poly без подповерхностного рассеивания.
В играх для таких деталей используют normal map. Это вот такая фиолетовая текстурка. Ее запекают с многомиллионной high poly на game ready модельку из считанных тысяч треугольников.
Конкретно здесь world space normal, это почти то же самое, но не совсем. Для персонажей используют tangent normal. Увы, поиск по картинкам во всех поисковиках отупел и нормальных примеров не удается найти.
И да, для анимации морщин в играх тоже используют карты нормалей.
В нашем случае никаких карт нормалей не будет. Для максимального реализма должна быть честная геометрия каждой поры на коже с честными деформациями. Каким образом железо в воркстанциях будет это переваривать - без понятия, не моя проблема.
И вот на их основе делается датасет. Возможно даже делается отдельная версия игры, которую натурально можно запустить только на целой серверной стойке. С неё делается запись прохождения, много записей. И вот на них и будет учиться нейронка.
Забавно, кстати, что это получается своего рода возврат к DLSS 1.0, который тоже обучали для конкретных игр.
Но будут ли всем этим заморачиваться разрабы вместе с Хуангом?
Сомневаюсь.
А значит жрать нам всем сраное нейрослопное хрючево с качеством уровня нейрофильтров из тиктока.