🎯 SAM 3D: новая эра 3D-реконструкции от Meta

Meta представила SAM 3D — прорывные модели для преобразования 2D-изображений в детализированные 3D-модели объектов и человеческого тела.

SAM 3D включает две модели: SAM 3D Objects для реконструкции объектов и сцен, и SAM 3D Body для оценки формы и позы человека. Обе используют мощный data engine, который генерирует и оценивает 3D-модели на основе реальных изображений, преодолевая разрыв между симуляцией и реальностью. Модели обучаются на почти 1 млн изображений и 3,14 млн синтезированных сеток. В основе — многоэтапный процесс с предобучением на синтетике и дообучением на реальных данных. Также представлен SA-3DAO — новый бенчмарк из реальных сцен для тестирования.

SAM 3D Objects демонстрирует соотношение побед 5:1 в тестах, а SAM 3D Body использует открытый формат Meta Momentum Human Rig (MHR) для точного разделения скелета и мягких тканей.

#meta_ai #3d_reconstruction #sam3d #computer_vision #ai_research