Airbnb запустил 3D-планы помещений (3D Floor Plans). Хозяин жилья может на изи пройтись по дому с айфоном и за пару минут получить интерактивный 3D-план помещения.

пример разметки первым комментом

пайплайн обработки

1. получение сырых данных: неупорядоченные массивы стен, проёмы без меток, ограничивающие объёмы объектов (bounding boxes) и сегментация комнат с ошибками;

2. процедурная реконструкция: восстановление аккуратных замкнутых контуров стен, построение полов и проёмов, исправление разбиения на комнаты, создание модульной мебели;

3. семантическое распознавание: собственные AI/ML-модели обнаруживают удобства и оснащение, которые не распознаются стандартными средствами 3D-сканирования;

4. визуализация: сильно модифицированный рендер-пайплайн на Three.js отображает чистую, стилизованную сцену.

Разработка заняла несколько лет: от AI-прототипов до быстрого сценария, рассчитанного на миллионы хозяев жилья