"Коротенькая" статья, NeRF as a Non-Distant Environment Emitter in Physics-based Inverse Rendering, (боже мой, до чего мы дошли, называя 12-страничные статьи коротенькими 😅) презентует интересное решение в виде использования нёрфов вместо environment map для обратного рендера.

Очевидно, главное предположение environment map, зиждущееся на бесконечной удаленности окружающих точек, не реализуется во множестве сцен.

Использовали Mitsuba вместе с NeRF-Studio, и ребятам пришлось очень сильно подзадолбаться, чтобы их соединить из-за megakernel природы исполнения первого движка + прожорливости нёрфов. Даже сделали multi-GPU поддержку.

Результаты на лицо (в прямом смысле этого слова 😅).

Также ребята предложили более эффективный алгоритм для Монте-Карло оценщика градиентов, чтобы семплировать отражения лучше не только на основе BSDF. Некий упрощённый path guiding.