А вот это занятная реализация релайта, посредством сегментирования и замены фона, а также перевода актора в PBR пригодный формат для рендеринга.

К сожалению, пока далеко не в реальном времени, крутится при 2-3 fps, пока просчитываются текстуры, на Nvidia 6000 Ada. После крутится чуть бодрее, но все еще не в реальном времени.

Когда-нибудь наступит момент осознания, что люди с экранов на государственном уровне были полностью синтезированы и управлялись AGI. Пелевину привет!

Основано на этой работе.