CUT3R

Это модель непрерывного 3D-восприятия с постоянным состоянием, предназначенная для онлайн-реконструкции трехмерных сцен из последовательности изображений и видео.

Она использует рекуррентную архитектуру, которая обновляет свое состояние с каждым новым наблюдением, позволяя генерировать метрические точечные карты для каждого входного изображения в режиме реального времени.

Модель способна предсказывать структуру невидимых областей сцены, основываясь на имеющихся наблюдениях, и поддерживает как статические, так и динамические сцены.

Lang: Python https://github.com/CUT3R/CUT3R