Роботы получат стереозрение для работы при плохой видимости

Ученые Московского физико-технического института (МФТИ) совместно с иностранными исследователями разработали новую систему в области компьютерного зрения под названием Un-ViTAStereo. Эта технология позволит работать в трудных погодных условиях и определять дистанцию до объектов без дорогостоящего оборудования.

Как сообщают «Известия», новая ИИ-разработка показывает высокую эффективность в сложных природных условиях, где традиционные аналоги ошибаются, например, в тумане или в густой листве. Подход может быть использован в системах автопилотирования автомобилей и навигации автономных роботов. 

Для разработки технологии специалисты использовали специального «учителя» для нейросети – Depth Anything V2. ИИ-инструмент анализировал картинку с камеры, с высокой долей уверенности определял расположение, учитывая при этом особенности освещения и геометрии сцены. Механизм обучения учитывал только те данные, которые совпадали с «мнением» наставника, что заметно повысило точность работы нейросети. 

«Модель Depth Anything V2 постоянно передает подсказки стереосистеме. Например, "я не знаю, на сколько метров эта машина ближе дерева, но она точно ближе, и граница между ними должна быть резкой" или "на этой стене, где нет контраста, глубина должна меняться плавно"», – прокомментировал руководитель проекта Научно-технического центра телекоммуникаций МФТИ Александр Дворкович. 

В основе работы подобных систем лежит принцип зрения человека: две камеры имитируют глаза, а нейросети выступают в роли мозга, строящего 3D-модель пространства. 

Ранее компания Niantic Spatial (создатели игры Pokémon Go) начала работу со стартапом Coco Robotics, который внедряет роботов для доставки «последней мили» в ряде городов США и Европы. В частности, стартап получил данные игроков для обучения своего парка роботов.