Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон продемонстрировали, что можно комбинировать несколько видео, снятых на разные iPhone с разных сторон, для создания 4d-визуализаций.

Видео, которое получится в результате, позволит зрителям наблюдать за происходящим под разными углами или даже стирать людей и объекты, которые блокируют видимость.

Представьте себе, допустим, свадьбу, где танцоров видно с любого ракурса, а перебравшего гостя, прошедшего неверной походкой на переднем плане, на записи нет.

Видео можно снимать с разных точек обзора независимо друг от друга, как это часто бывает на крупных банкетах или коопоративах, отметил аспирант института робототехники университета Аюш Бансал. Тех, кто в центре внимания, можно снять в одном месте, а после перенести их в другую среду с другими декорациями.

— Мы ограничены только количеством камер, с которых будут вести съемку, сказал Бансал. — Верхнего порога по количеству видеопотоков не существует.

Свой новый метод четырехмерной визуализации Бансал с коллегами представили в ходе виртуальной конференции Computer Vision and Pattern Recognition.

— Виртуальная реальность — это не новшество, но ранее ее можно было формировать только в студии, оснащенной десятками или сотнями камер, встроенными в стены.

Объединить несколько видео, снятых в произвольном месте произвольными камерами, в единую комплексную 3d-сцену было невозможно.

Обойти ограничение Бансалу с коллегами помогли конволюционные нейронные сети — разновидность программы глубинного обучения, которая хорошо зарекомендовала себя в обработке визуальных данных. Ученые выяснили, что эти нейронные сети можно использовать для компоновки различных частей сцены.

Исследователи продемонстрировали возможности метода, снимая на 15 iPhone различные сцены — танцы, демонстрации боевых искусств и фламинго в национальном парке Питтсбурга.

— Почему именно iPhone? Мы хотели показать, что любой человек сможет пользоваться системой, и что теперь студия не имеет границ, она — весь мир, заключил Бансал.

Инновационный метод открывает множество потенциальных применений в киноиндустрии и потребительских устройствах, особенно с учетом того, что популярность гарнитур виртуальной реальности продолжает расти.

Несмотря на то, что метод не всегда фиксирует сцены в полноценном 3d-формате, система может ограничить угол воспроизведения так, чтобы дефектные области не просматривались и иллюзия трехмерного изображения не нарушалась.

02.07.2020


Подписаться в Telegram



Медиа

PNAS: ИИ помогает находить, но не учит отличать фейковые новости
PNAS: ИИ помогает находить, но не учит отличать фейковые новости

Многие технологические компании и стартап...

Clinical Psychological Science: Предупреждения об опасном контенте не работают
Clinical Psychological Science: Предупреждения об опасном контенте не работают

Сторонники использования триггерных предупрежд...

Cognition: люди лучше запоминают символы, чем их словесные аналоги
Cognition: люди лучше запоминают символы, чем их словесные аналоги

Повседневные символы запоминаются отлично, уве

Исследование: американские сми становятся все более предвзятыми
Исследование: американские сми становятся все более предвзятыми

Согласно результатам исследования 1,8 млн ...

Социальные сети могут и созидать, и разрушать
Социальные сети могут и созидать, и разрушать

Социальные медиа объединяют людей и усили...

Жители московского коливинга создали бренд одежды
Жители московского коливинга создали бренд одежды

В коливинге проекта Colife жители создали свой...

Неймерам на заметку: на Западе рулят женственные бренды
Неймерам на заметку: на Западе рулят женственные бренды

Ученые из университета Калгари, университ...

Каталоги с дополненной реальностью как маркетинговая стратегия будущего
Каталоги с дополненной реальностью как маркетинговая стратегия будущего

Рекламная полиграфия способна привлекать покуп...

Студия для создания 4d-съемки больше не нужна
Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон про...

Фактчекинг не вернет доверие к сми
Фактчекинг не вернет доверие к сми

Журналисты могут вернуть доверие к профес...

Ученые выяснили, у кого есть шансы выжить в Игре престолов
Ученые выяснили, у кого есть шансы выжить в Игре престолов

Персонажи Игры престолов с большей вероят...

Выяснилось, как полиграфия увеличивает продажи
Выяснилось, как полиграфия увеличивает продажи

В последнее время рекламная полиграфия стремит

Следи за лексиконом - и воздастся!
Следи за лексиконом - и воздастся!

В новом исследовании, основанном на психо...

Как выглядит работающий рекламный баннер
Как выглядит работающий рекламный баннер

Баннером принято называть рекламный носитель с...

В приоритете у экспертов - нейрометрическая диагностика бренда
В приоритете у экспертов - нейрометрическая диагностика бренда

01-10 июня 2015 года специалисты исследователь...

Поиск на сайте

Знатоки клуба инноваций


ТОП - Новости мира, инновации

Воздух, который делает нас глупее: что наука знает о влиянии загрязнения на мозг
Воздух, который делает нас глупее: что наука знает о влиянии загрязнения на мозг
Нейросети будущего: поляритоны в СПбГУ бьют рекорды точности
Нейросети будущего: поляритоны в СПбГУ бьют рекорды точности
Океан Энцелада: жизнь может быть ближе, чем мы думаем, но скрыта от нас
Океан Энцелада: жизнь может быть ближе, чем мы думаем, но скрыта от нас
Гены в режиме ожидания: как клетки решают, кем стать
Гены в режиме ожидания: как клетки решают, кем стать
Жизнь в капле: ученые раскрыли секрет древних протоклеток
Жизнь в капле: ученые раскрыли секрет древних протоклеток
Эволюция в действии: почему одни мушки побеждают вирусы, а другие нет
Эволюция в действии: почему одни мушки побеждают вирусы, а другие нет
Микробы в космосе: как L-серин поможет найти жизнь на Марсе
Микробы в космосе: как L-серин поможет найти жизнь на Марсе
Новый ключ к лечению аритмии: сделано открытие, которое изменит кардиологию
Новый ключ к лечению аритмии: сделано открытие, которое изменит кардиологию
Световая атака: как зеленый свет помогает бороться с коронавирусом и энцефалитом
Световая атака: как зеленый свет помогает бороться с коронавирусом и энцефалитом
23 мышцы, которые меняют все: создана новая модель для лечения боли
23 мышцы, которые меняют все: создана новая модель для лечения боли
Молодые умы и большие деньги: Татарстан выделяет 250 млн рублей на инновации
Молодые умы и большие деньги: Татарстан выделяет 250 млн рублей на инновации
ИИ, которому можно доверять: ACHILLES объединяет технологии, этику и экологию
ИИ, которому можно доверять: ACHILLES объединяет технологии, этику и экологию
700 000 участниц, 11 миллионов фунтов и шанс победить рак
700 000 участниц, 11 миллионов фунтов и шанс победить рак
Блины с пользой: ученые превратили вредный завтрак в суперфуд
Блины с пользой: ученые превратили вредный завтрак в суперфуд
Квантовый щит: физика меняет правила игры в цифровой безопасности
Квантовый щит: физика меняет правила игры в цифровой безопасности

Новости компаний, релизы

На Фестивале «Москва — Точка старта» победили проекты из МИФИ
ХимБиоПлюс — шанс для школьников всей России
Правительство Республики Казахстан пригласило МИФИ войти в совет по стратегическому партнерству в науке и образовании
Нижегородский ЗГМ провел испытания разработанных по нацпроекту радиопоглощающих материалов
МФТИ подготовил более 140 специалистов в области синхротронных и нейтронных исследований