Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон продемонстрировали, что можно комбинировать несколько видео, снятых на разные iPhone с разных сторон, для создания 4d-визуализаций.

Видео, которое получится в результате, позволит зрителям наблюдать за происходящим под разными углами или даже стирать людей и объекты, которые блокируют видимость.

Представьте себе, допустим, свадьбу, где танцоров видно с любого ракурса, а перебравшего гостя, прошедшего неверной походкой на переднем плане, на записи нет.

Видео можно снимать с разных точек обзора независимо друг от друга, как это часто бывает на крупных банкетах или коопоративах, отметил аспирант института робототехники университета Аюш Бансал. Тех, кто в центре внимания, можно снять в одном месте, а после перенести их в другую среду с другими декорациями.

— Мы ограничены только количеством камер, с которых будут вести съемку, сказал Бансал. — Верхнего порога по количеству видеопотоков не существует.

Свой новый метод четырехмерной визуализации Бансал с коллегами представили в ходе виртуальной конференции Computer Vision and Pattern Recognition.

— Виртуальная реальность — это не новшество, но ранее ее можно было формировать только в студии, оснащенной десятками или сотнями камер, встроенными в стены.

Объединить несколько видео, снятых в произвольном месте произвольными камерами, в единую комплексную 3d-сцену было невозможно.

Обойти ограничение Бансалу с коллегами помогли конволюционные нейронные сети — разновидность программы глубинного обучения, которая хорошо зарекомендовала себя в обработке визуальных данных. Ученые выяснили, что эти нейронные сети можно использовать для компоновки различных частей сцены.

Исследователи продемонстрировали возможности метода, снимая на 15 iPhone различные сцены — танцы, демонстрации боевых искусств и фламинго в национальном парке Питтсбурга.

— Почему именно iPhone? Мы хотели показать, что любой человек сможет пользоваться системой, и что теперь студия не имеет границ, она — весь мир, заключил Бансал.

Инновационный метод открывает множество потенциальных применений в киноиндустрии и потребительских устройствах, особенно с учетом того, что популярность гарнитур виртуальной реальности продолжает расти.

Несмотря на то, что метод не всегда фиксирует сцены в полноценном 3d-формате, система может ограничить угол воспроизведения так, чтобы дефектные области не просматривались и иллюзия трехмерного изображения не нарушалась.

02.07.2020


Подписаться в Telegram



Медиа

Clinical Psychological Science: Предупреждения об опасном контенте не работают
Clinical Psychological Science: Предупреждения об опасном контенте не работают

Сторонники использования триггерных предупрежд...

Cognition: люди лучше запоминают символы, чем их словесные аналоги
Cognition: люди лучше запоминают символы, чем их словесные аналоги

Повседневные символы запоминаются отлично, уве

Исследование: американские сми становятся все более предвзятыми
Исследование: американские сми становятся все более предвзятыми

Согласно результатам исследования 1,8 млн ...

Социальные сети могут и созидать, и разрушать
Социальные сети могут и созидать, и разрушать

Социальные медиа объединяют людей и усили...

Жители московского коливинга создали бренд одежды
Жители московского коливинга создали бренд одежды

В коливинге проекта Colife жители создали свой...

Неймерам на заметку: на Западе рулят женственные бренды
Неймерам на заметку: на Западе рулят женственные бренды

Ученые из университета Калгари, университ...

Каталоги с дополненной реальностью как маркетинговая стратегия будущего
Каталоги с дополненной реальностью как маркетинговая стратегия будущего

Рекламная полиграфия способна привлекать покуп...

Студия для создания 4d-съемки больше не нужна
Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон про...

Фактчекинг не вернет доверие к сми
Фактчекинг не вернет доверие к сми

Журналисты могут вернуть доверие к профес...

Ученые выяснили, у кого есть шансы выжить в Игре престолов
Ученые выяснили, у кого есть шансы выжить в Игре престолов

Персонажи Игры престолов с большей вероят...

Выяснилось, как полиграфия увеличивает продажи
Выяснилось, как полиграфия увеличивает продажи

В последнее время рекламная полиграфия стремит

Следи за лексиконом - и воздастся!
Следи за лексиконом - и воздастся!

В новом исследовании, основанном на психо...

Как выглядит работающий рекламный баннер
Как выглядит работающий рекламный баннер

Баннером принято называть рекламный носитель с...

В приоритете у экспертов - нейрометрическая диагностика бренда
В приоритете у экспертов - нейрометрическая диагностика бренда

01-10 июня 2015 года специалисты исследователь...

Телевизионная реклама стимулирует продажи онлайн
Телевизионная реклама стимулирует продажи онлайн

Многие телевизионные рекламодатели высказывают...

Реклама по ТВ должна быть уместной
Реклама по ТВ должна быть уместной

Грустная телевизионная драма близится к р...

Скорость просмотра имеет значение
Скорость просмотра имеет значение

Казалось бы, давно ли книги и винило...

Поиск на сайте

Знатоки клуба инноваций


ТОП - Новости мира, инновации

В России предложили новую классификацию камней в почках по структуре и составу
В России предложили новую классификацию камней в почках по структуре и составу
ACS Nano: Благодаря 3D-печати ученые впервые увидели, как светятся наноструктуры
ACS Nano: Благодаря 3D-печати ученые впервые увидели, как светятся наноструктуры
Ученые МИСИС выяснили, как сделать суперконденсаторы ещё круче
Ученые МИСИС выяснили, как сделать суперконденсаторы ещё круче
Исследование МГПУ объясняет, как справиться с одиночеством в мегаполисе
Исследование МГПУ объясняет, как справиться с одиночеством в мегаполисе
Как музыка влияет на эмоции дошкольников: открытие психологов МГУ
Как музыка влияет на эмоции дошкольников: открытие психологов МГУ
Студент из Владивостока придумал товарные ценники на основе электронных чернил
Студент из Владивостока придумал товарные ценники на основе электронных чернил
Microgravity: Полет на Марс может не состояться из-за просроченных лекарств
Microgravity: Полет на Марс может не состояться из-за просроченных лекарств
Археологи СФУ нашли артефакты первых русских поселенцев Красноярска
Археологи СФУ нашли артефакты первых русских поселенцев Красноярска
Горные деревья спасаются от потепления, сползая и поднимаясь по склонам
Горные деревья спасаются от потепления, сползая и поднимаясь по склонам
Transportation Research: Выбросы абразива от поездов вызывают беспокойство
Transportation Research: Выбросы абразива от поездов вызывают беспокойство
Ученые из СПбГУТ отправились в научную экспедицию в Арктику
Ученые из СПбГУТ отправились в научную экспедицию в Арктику
Казанские ученые заявили, что адаптивность молочного скота важнее генетики
Казанские ученые заявили, что адаптивность молочного скота важнее генетики
Звездный магнетизм может указывать на потенциальную обитаемость экзопланеты
Звездный магнетизм может указывать на потенциальную обитаемость экзопланеты
IEEE Access: Актуатор в реабилитационных перчатках восстановит движение пальцев
IEEE Access: Актуатор в реабилитационных перчатках восстановит движение пальцев
Scientific Reports: Экологичное лечение спасает яйца кальмаров от паразита
Scientific Reports: Экологичное лечение спасает яйца кальмаров от паразита

Новости компаний, релизы

Конференция по актуальным проблемам водоподготовки
Ученые ТПУ в составе международной коллаборации выяснили, что смертность от болезней сердца в мире снизилась на 35% за после...
ПМЭФ-2024: СПбГУ представил систему контроля на основе искусственного интеллекта
ИТ: тренды индустрии и рынка труда
Медики СПбГУ создали линию мышей для разработки новых методов лечения слепоты у человека