Почему трекинг шота со стабилизацией — это сложно? 🤔

Cуществуют два основных способа стабилизации: ● Камерная ● Стабилизация «на посте»

В свою очередь, камерная стабилизация бывает: ● матричной, ● интегрированной в объектив, ● цифровой.

Постпродакшн-стабилизация может быть: ● двухмерной, ● планарной, ● Warp-стабилизацией.

➡️ Матричная стабилизация камеры предполагает компенсацию колебаний камеры за счет подвижной системы крепления самой матрицы, установленной на стабилизирующей платформе.

➡️ Оптическая стабилизация осуществляется за счет смещения отдельных элементов внутри объектива.

В результате стабилизации происходит постоянное динамическое смещение оптического центра объектива относительно сенсора, а поскольку подбор параметров для солва камеры (дисторсия и траектория движения) происходит, опираясь на оптический центр, в расчете появляется неизвестное переменное значение.

➡️ Цифровая стабилизация также изменяет положение оптического центра, так как происходит кроп сенсора, чтобы иметь возможность двигать рабочую область обрезки в противовес движениям, которые необходимо компенсировать.

➡️ Стабилизация на постпродакшне, так же как и цифровая стабилизация камеры, обрезает изображение. А если мы используем Warp-стабилизацию, это создает еще более неконтролируемые, хаотичные трансформации, так как отдельные фрагменты кадра могут деформироваться независимо друг от друга, что невозможно для классической оптической системы.

🚩 Всё вышеперечисленное приводит к тому, что при попытке выполнить трекинг софт не может корректно определить реальные движения камеры и объектов. Сложности возникают из-за того, что трекеры «ожидают» естественных движений камеры и объектов, а стабилизация искажает эти данные. Более того, любое масштабирование или обрезка кадра после стабилизации могут еще больше усложнить процесс трекинга, так как меняется угол обзора камеры (AoV), и параметры фокусного расстояния/сенсора должны быть скорректированы, но нельзя точно определить их значения, так как они изменяются во времени, как и оптический центр.

💡 Как решить эту проблему? Настоятельно рекомендуем отключать любые виды стабилизации на съемке и использовать гимблы, рельсы и стедикамы.

Для съемки с телефонов мы также подготовили для вас гайд 📎.

Перед выполнением трекинга рекомендуется работать с нестабилизированными кадрами. Стабилизацию можно применить на финальном этапе, уже после того как все элементы и трекинг будут выполнены.

Если вам приходилось сталкиваться с такими трудностями, делитесь опытом в чате Matchmove machine 💬