Новая технология стабилизации видео Hyperlapse

Подразделение Microsoft Research проводит множество исследований и работает над разными инновационными технологиями. Благодаря инженерам данного подразделения появилась новая технология стабилизации видео (требуется в основном при съемке видео от первого лица на смартфон или носимую камеру), основанная на 3D-реконструкции и 3D-моделировании снятого видео.

Технологии стабилизации видео уже присутствуют в каждой современной камере, фотоаппарате и смартфоне. Зачастую они основаны на обрезании кадров и замедлении смены картинки. Одна из технологий заключается в том, чтобы обрезать картинку, получаемую матрицей со всех сторон и выводить оставшуюся уменьшенную картинку, которая находится в фокусе гораздо чаще при дрожании устройства.

Технология же Microsoft под названием Hyperlapse заключается в другом. Первое что делает технология, это выполняет 3D-реконструкцию видео. Далее происходит прокладка нового, более плавного маршрута и моделирование видео на основе 3D-моделирования, как это происходит в видео-играх, добавляя недостающие фрагменты и пиксели.

Такая обработка видео требует гораздо большего времени и компьютерных ресурсов, это больше похоже на моделирование пространства, которое происходит в видео-играх. В будущем все процессы можно будет перенести в облако, так как сейчас обработка 10 минутного ролика занимает несколько часов. Однако, на более ранних этапах развития этой технологии, короткие 10 минутные ролики обрабатывались сотни часов.