Преобразуем Фото в 3D: Нейросетевой Gaussian Splatting в VRChat 📸✨

В VRChat открылся демонстрационный мир Auto Splatter, позволяющий трансформировать плоские 2D-изображения в объемные 3D-сцены. Технология базируется на использовании «гауссовых пятен» — облаков из миллионов полупрозрачных эллипсоидов, которые формируют фотореалистичный объем без использования привычных полигонов.

🌐 Как работает Мир:
Загружаем картинку на сайт auto-splatter.web.app, получаете URL ссылку и вставляете её в мире Auto Splatter VRChat, несколько секунд и смотрим на резултат.

⚙️ Детали:
Если подробнее процесс автоматизирован и проходит в несколько этапов:
1) Анализ: Загруженное изображение обрабатывается нейросетью SHARP от Apple. Она восстанавливает глубину и «угадывает» скрытые ракурсы.
2) Конвертация: Полученные данные экспортируются в файл формата .ply, который затем упаковывается в пять текстур.
3) Интеграция: Все данные сжимаются в единый .tar архив. Вам достаточно вставить одну прямую ссылку в VRChat, чтобы увидеть результат.

💡 Нюансы:
Наилучшее качество достигается при работе с реальными фотографиями, содержащими EXIF-данные (особенно информацию о фокусном расстоянии). Это позволяет алгоритму точнее рассчитать перспективу.

👉 Посетить Мир Auto Splatter (PCVR)

⚠️ За и Против:
+ Плюсы: Невероятная скорость создания контента. Можно не просто показывать фото друзьям, а буквально приглашать их внутрь запечатленного момента.
- Минусы: Технология несовершенна, нейросеть может «галлюцинировать», создавая визуальные артефакты на заднем плане. Не все фото получаются объемными.

🤔 Вопрос к аудитории:
Как вы считаете, станет ли подобная «быстрая» оцифровка реальности основным способом создания VR-контента, или классическое 3D-моделирование останется незаменимым?
Обсуждаем в комментариях. 👇

#VR #VRChat #AI #GaussianSplatting #Технологии