Ученые создали технологию воссоздания 3D-карт в реальном времени

Болонский университет представил два приложений, разработанные с использованием методик глубокого обучения, которые позволяют воссоздать 3D-карты в реальном времени даже с одной видеокамеры.

Использование изображений одной камеры, даже простого смартфона, позволяет воссоздать сложные 3D-карты окружающей среды в реальном времени, которые затем могут быть реализованы, например, в системах или приложениях дополненной реальности.

Это приложение, разработанное в Болонском университете, и представленное на выставке в рамках проекта «Интернет вещей», инициативы, в которой участвуют четыре университета Эмилии-Романьи.

Альма-матер участвует в совместной лаборатории компьютерного зрения университета информатики - науки и техники.

Ученые покажут, как с помощью методов обучения можно использовать фотографии с одной или нескольких видеокамер, чтобы получить подробную информацию о 3D-картах окружающей среды.

«Эта тема представляет большой интерес для разных областей применения: автономное вождение, дополненная реальность, IOT-системы, робототехника, видеонаблюдение» - объясняет профессор Стефано Матточчиа.

Методологии, основанные на глубоком обучение, сегодня самые современные.

Наш исследовательский коллектив активно работает в этом направлении, особенно в отношении методик без наблюдений, которые значительно облегчают обучение сетей».

Исследователи фактически разработали сети, способные определять трехмерную структуру сцен в реальном времени с использованием маломощных устройств, даже с единственной камерой (монокулярными системами), такой как у смартфона.

На основе этого результата на выставке в Дубае будут представлены две версии.

Первый позволяет оживить детали 3D-карт в реальном времени, чтобы приложение дополненной реальности лучше соответствовало исследуемой среде.

В сети, обрабатывающей одно изображение, система фактически способна реконструировать 3D-карту, что позволяет, например, размещать в ней виртуальные объекты, взаимодействующие с реальным окружением.

Система мониторинга физического пространства - это второе приложение, которое будет представлено.

Здесь отправной точкой будет создание 3D-карт с помощью монокулярной системы, то есть с использованием одной камеры, что позволяет адаптироваться к любой среде.

После установки камеры разработанная технология позволяет генерировать 3D карту при соответствующем масштабе, чтобы определить абсолютное расстояние между человеком и людьми в контролируемой среде.

Таким образом, в режиме реального времени возможно проверять физическое расстояние между человеком в контролируемом режиме, различая ситуации, не представляющие угрозы, случаи чрезмерного сближения и фактически нарушения ограничений расстояний.

Источник: https://magazine.unibo.it/