Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон продемонстрировали, что можно комбинировать несколько видео, снятых на разные iPhone с разных сторон, для создания 4d-визуализаций.

Видео, которое получится в результате, позволит зрителям наблюдать за происходящим под разными углами или даже стирать людей и объекты, которые блокируют видимость.

Представьте себе, допустим, свадьбу, где танцоров видно с любого ракурса, а перебравшего гостя, прошедшего неверной походкой на переднем плане, на записи нет.

Видео можно снимать с разных точек обзора независимо друг от друга, как это часто бывает на крупных банкетах или коопоративах, отметил аспирант института робототехники университета Аюш Бансал. Тех, кто в центре внимания, можно снять в одном месте, а после перенести их в другую среду с другими декорациями.

— Мы ограничены только количеством камер, с которых будут вести съемку, сказал Бансал. — Верхнего порога по количеству видеопотоков не существует.

Свой новый метод четырехмерной визуализации Бансал с коллегами представили в ходе виртуальной конференции Computer Vision and Pattern Recognition.

— Виртуальная реальность — это не новшество, но ранее ее можно было формировать только в студии, оснащенной десятками или сотнями камер, встроенными в стены.

Объединить несколько видео, снятых в произвольном месте произвольными камерами, в единую комплексную 3d-сцену было невозможно.

Обойти ограничение Бансалу с коллегами помогли конволюционные нейронные сети — разновидность программы глубинного обучения, которая хорошо зарекомендовала себя в обработке визуальных данных. Ученые выяснили, что эти нейронные сети можно использовать для компоновки различных частей сцены.

Исследователи продемонстрировали возможности метода, снимая на 15 iPhone различные сцены — танцы, демонстрации боевых искусств и фламинго в национальном парке Питтсбурга.

— Почему именно iPhone? Мы хотели показать, что любой человек сможет пользоваться системой, и что теперь студия не имеет границ, она — весь мир, заключил Бансал.

Инновационный метод открывает множество потенциальных применений в киноиндустрии и потребительских устройствах, особенно с учетом того, что популярность гарнитур виртуальной реальности продолжает расти.

Несмотря на то, что метод не всегда фиксирует сцены в полноценном 3d-формате, система может ограничить угол воспроизведения так, чтобы дефектные области не просматривались и иллюзия трехмерного изображения не нарушалась.

02.07.2020


Подписаться в Telegram



Медиа

Clinical Psychological Science: Предупреждения об опасном контенте не работают
Clinical Psychological Science: Предупреждения об опасном контенте не работают

Сторонники использования триггерных предупрежд...

Cognition: люди лучше запоминают символы, чем их словесные аналоги
Cognition: люди лучше запоминают символы, чем их словесные аналоги

Повседневные символы запоминаются отлично, уве

Исследование: американские сми становятся все более предвзятыми
Исследование: американские сми становятся все более предвзятыми

Согласно результатам исследования 1,8 млн ...

Социальные сети могут и созидать, и разрушать
Социальные сети могут и созидать, и разрушать

Социальные медиа объединяют людей и усили...

Жители московского коливинга создали бренд одежды
Жители московского коливинга создали бренд одежды

В коливинге проекта Colife жители создали свой...

Неймерам на заметку: на Западе рулят женственные бренды
Неймерам на заметку: на Западе рулят женственные бренды

Ученые из университета Калгари, университ...

Каталоги с дополненной реальностью как маркетинговая стратегия будущего
Каталоги с дополненной реальностью как маркетинговая стратегия будущего

Рекламная полиграфия способна привлекать покуп...

Студия для создания 4d-съемки больше не нужна
Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон про...

Фактчекинг не вернет доверие к сми
Фактчекинг не вернет доверие к сми

Журналисты могут вернуть доверие к профес...

Ученые выяснили, у кого есть шансы выжить в Игре престолов
Ученые выяснили, у кого есть шансы выжить в Игре престолов

Персонажи Игры престолов с большей вероят...

Выяснилось, как полиграфия увеличивает продажи
Выяснилось, как полиграфия увеличивает продажи

В последнее время рекламная полиграфия стремит

Следи за лексиконом - и воздастся!
Следи за лексиконом - и воздастся!

В новом исследовании, основанном на психо...

Как выглядит работающий рекламный баннер
Как выглядит работающий рекламный баннер

Баннером принято называть рекламный носитель с...

В приоритете у экспертов - нейрометрическая диагностика бренда
В приоритете у экспертов - нейрометрическая диагностика бренда

01-10 июня 2015 года специалисты исследователь...

Телевизионная реклама стимулирует продажи онлайн
Телевизионная реклама стимулирует продажи онлайн

Многие телевизионные рекламодатели высказывают...

Реклама по ТВ должна быть уместной
Реклама по ТВ должна быть уместной

Грустная телевизионная драма близится к р...

Поиск на сайте

Знатоки клуба инноваций


ТОП - Новости мира, инновации

Memoirs of the Queensland Museum — Nature: Открыт новый вид краба-отшельника
Memoirs of the Queensland Museum — Nature: Открыт новый вид краба-отшельника
В МГУ увеличили эффективность противогрибковых препаратов в 5000 раз
В МГУ увеличили эффективность противогрибковых препаратов в 5000 раз
МФТИ: Линзы тоньше волоса ускорят диагностику болезней на дому
МФТИ: Линзы тоньше волоса ускорят диагностику болезней на дому
Journal of International Development: Холодильник — все еще символ достатка
Journal of International Development: Холодильник — все еще символ достатка
Nature Communications: Наночастицы с оснасткой находят белки в плазме крови
Nature Communications: Наночастицы с оснасткой находят белки в плазме крови
Energy & Fuels: Отработанное масло пустят в ход — на переработку в биодизель
Energy & Fuels: Отработанное масло пустят в ход — на переработку в биодизель
Ученые выяснили, как защитить томаты от надвигающейся жары
Ученые выяснили, как защитить томаты от надвигающейся жары
JACS: Чтобы отследить реакцию убийцы озона на свет, пришлось обогнать молекулы
JACS: Чтобы отследить реакцию убийцы озона на свет, пришлось обогнать молекулы
Искусственные рецепторы на основе ДНК коронавируса открывают новые возможности
Искусственные рецепторы на основе ДНК коронавируса открывают новые возможности
EMBO: Открыта связь между генной мутацией и митохондриальными заболеваниями
EMBO: Открыта связь между генной мутацией и митохондриальными заболеваниями
B&B: Разработан неинвазивный биосенсор для ранней диагностики заболеваний почек
B&B: Разработан неинвазивный биосенсор для ранней диагностики заболеваний почек
Эксперт ТИСБИ дал оценку готовности Татарстана к переходу на водород
Эксперт ТИСБИ дал оценку готовности Татарстана к переходу на водород
В Челябинске разрабатывают инновационное оборудование для вибрационных испытаний
В Челябинске разрабатывают инновационное оборудование для вибрационных испытаний
В ТПУ открыт экологичный способ получения катализаторов для очистки газов
В ТПУ открыт экологичный способ получения катализаторов для очистки газов
NPJ Microgravity: Микрогравитация усиливает способность клеток регенерировать
NPJ Microgravity: Микрогравитация усиливает способность клеток регенерировать

Новости компаний, релизы

На старт! Внимание! MITEX!
Международные эксперты оценили разработанную для нижегородского завода технологию
Фестиваль научных театров «Наука всем!» прошёл в Санкт-Петербурге
СПбГУ в топ-5 лучших университетов стран БРИКС по версии Ассоциации составителей рейтингов
«Неделя без турникетов» проходит на предприятиях «Вертолетов России»