Новая технология MIT позволяет возиться с объектами в заранее записанном видео

Несмотря на все, что происходит в кадре, просмотр видео по-прежнему остается пассивным опытом. До сих пор вы не можете дотянуться до объектов, за которыми наблюдаете, и возиться с ними. Исследователь Массачусетского технологического института первооткрыватель новая технология, которая позволяет вам «прикасаться» к записанным вещам, которые моделируются так, чтобы реагировать так, как будто вы возились с ними в реальном мире.

Так как же предсказать, в каком направлении будет двигаться уже записанный объект при настройке? Система под названием «Интерактивное динамическое видео(IDV) требуется пять минут видеозаписи, чтобы отследить возможности движения. Он делает это, анализируя, как он смещается при намеренном толчке: в видеопримере ниже исследователь хлопает стол, на котором покоится гуманоидная фигура, что позволяет системе увидеть, как она вибрирует в различных частоты. Затем он экстраполирует, как должен вести себя объект, когда зрители протягивают курсор и толкают объект в видео.

Очевидно, что это могло бы иметь множество применений в сфере развлечений и образования, но исследователям нужен был более актуальный пример, поэтому они внедрили систему в Покемон Годополненная реальность. С помощью IDV окружающая среда автоматически реагирует на движения карманных монстров, создавая впечатление, будто маленькие зверюшки на самом деле сгибают листья и траву, подпрыгивая.

Симуляция не идеальна, признает аспирант Массачусетского технологического института Эйб Дэвис в первом видео, но дополнительная информация повысит точность движения моделей, созданных IDV. С достаточной точностью его можно было бы использовать для оценки структурной целостности зданий. Но его также можно использовать в спецэффектах фильмов, настраивая объекты реального мира, с которыми на экране взаимодействует компьютерный персонаж.