Как роботы понимают, где находятся. И что происходит, когда они теряются?

Один из докладов Data Fest был посвящён локализации роботов и транспорта без GPS.

Для навигации роботы используют камеры, карты, лидары и IMU — инерциальные датчики (гироскопы и акселерометры). Но даже этого бывает недостаточно: карта может устареть, GPS пропасть, а окружающая среда измениться.

Больше всего меня зацепила идея, что в будущем речь может стать ещё одной модальностью для навигации.

Представьте: робот не уверен, где находится, и вместо очередной попытки пересчитать координаты просто спрашивает человека:

— Я рядом с парковкой или детской площадкой?
— Передо мной магазин или жилой дом?

Возможно, через несколько лет голос станет для роботов таким же источником информации об окружающем мире, как камера или лидар сегодня.