Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон продемонстрировали, что можно комбинировать несколько видео, снятых на разные iPhone с разных сторон, для создания 4d-визуализаций.

Видео, которое получится в результате, позволит зрителям наблюдать за происходящим под разными углами или даже стирать людей и объекты, которые блокируют видимость.

Представьте себе, допустим, свадьбу, где танцоров видно с любого ракурса, а перебравшего гостя, прошедшего неверной походкой на переднем плане, на записи нет.

Видео можно снимать с разных точек обзора независимо друг от друга, как это часто бывает на крупных банкетах или коопоративах, отметил аспирант института робототехники университета Аюш Бансал. Тех, кто в центре внимания, можно снять в одном месте, а после перенести их в другую среду с другими декорациями.

— Мы ограничены только количеством камер, с которых будут вести съемку, сказал Бансал. — Верхнего порога по количеству видеопотоков не существует.

Свой новый метод четырехмерной визуализации Бансал с коллегами представили в ходе виртуальной конференции Computer Vision and Pattern Recognition.

— Виртуальная реальность — это не новшество, но ранее ее можно было формировать только в студии, оснащенной десятками или сотнями камер, встроенными в стены.

Объединить несколько видео, снятых в произвольном месте произвольными камерами, в единую комплексную 3d-сцену было невозможно.

Обойти ограничение Бансалу с коллегами помогли конволюционные нейронные сети — разновидность программы глубинного обучения, которая хорошо зарекомендовала себя в обработке визуальных данных. Ученые выяснили, что эти нейронные сети можно использовать для компоновки различных частей сцены.

Исследователи продемонстрировали возможности метода, снимая на 15 iPhone различные сцены — танцы, демонстрации боевых искусств и фламинго в национальном парке Питтсбурга.

— Почему именно iPhone? Мы хотели показать, что любой человек сможет пользоваться системой, и что теперь студия не имеет границ, она — весь мир, заключил Бансал.

Инновационный метод открывает множество потенциальных применений в киноиндустрии и потребительских устройствах, особенно с учетом того, что популярность гарнитур виртуальной реальности продолжает расти.

Несмотря на то, что метод не всегда фиксирует сцены в полноценном 3d-формате, система может ограничить угол воспроизведения так, чтобы дефектные области не просматривались и иллюзия трехмерного изображения не нарушалась.

02.07.2020


Подписаться в Telegram



Медиа

Clinical Psychological Science: Предупреждения об опасном контенте не работают
Clinical Psychological Science: Предупреждения об опасном контенте не работают

Сторонники использования триггерных предупрежд...

Cognition: люди лучше запоминают символы, чем их словесные аналоги
Cognition: люди лучше запоминают символы, чем их словесные аналоги

Повседневные символы запоминаются отлично, уве

Исследование: американские сми становятся все более предвзятыми
Исследование: американские сми становятся все более предвзятыми

Согласно результатам исследования 1,8 млн ...

Социальные сети могут и созидать, и разрушать
Социальные сети могут и созидать, и разрушать

Социальные медиа объединяют людей и усили...

Жители московского коливинга создали бренд одежды
Жители московского коливинга создали бренд одежды

В коливинге проекта Colife жители создали свой...

Неймерам на заметку: на Западе рулят женственные бренды
Неймерам на заметку: на Западе рулят женственные бренды

Ученые из университета Калгари, университ...

Каталоги с дополненной реальностью как маркетинговая стратегия будущего
Каталоги с дополненной реальностью как маркетинговая стратегия будущего

Рекламная полиграфия способна привлекать покуп...

Студия для создания 4d-съемки больше не нужна
Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон про...

Фактчекинг не вернет доверие к сми
Фактчекинг не вернет доверие к сми

Журналисты могут вернуть доверие к профес...

Ученые выяснили, у кого есть шансы выжить в Игре престолов
Ученые выяснили, у кого есть шансы выжить в Игре престолов

Персонажи Игры престолов с большей вероят...

Выяснилось, как полиграфия увеличивает продажи
Выяснилось, как полиграфия увеличивает продажи

В последнее время рекламная полиграфия стремит

Следи за лексиконом - и воздастся!
Следи за лексиконом - и воздастся!

В новом исследовании, основанном на психо...

Как выглядит работающий рекламный баннер
Как выглядит работающий рекламный баннер

Баннером принято называть рекламный носитель с...

В приоритете у экспертов - нейрометрическая диагностика бренда
В приоритете у экспертов - нейрометрическая диагностика бренда

01-10 июня 2015 года специалисты исследователь...

Телевизионная реклама стимулирует продажи онлайн
Телевизионная реклама стимулирует продажи онлайн

Многие телевизионные рекламодатели высказывают...

Реклама по ТВ должна быть уместной
Реклама по ТВ должна быть уместной

Грустная телевизионная драма близится к р...

Скорость просмотра имеет значение
Скорость просмотра имеет значение

Казалось бы, давно ли книги и винило...

Ученый предсказал развитие событий в Игре престолов
Ученый предсказал развитие событий в Игре престолов

Ричард Вейл из университета Кентербери в&...

В сми работает больше кофеманов, чем в других отраслях
В сми работает больше кофеманов, чем в других отраслях

Ученые подсчитали, люди каких профессий&n

В Манчестерском университете обнаружен древний амулет
В Манчестерском университете обнаружен древний амулет

В фондах библиотеки Манчестерского университет...

Поиск на сайте

Знатоки клуба инноваций


ТОП - Новости мира, инновации

Транзисторы на основе бальзового дерева усилят позиции зеленой электроники
Транзисторы на основе бальзового дерева усилят позиции зеленой электроники
Наноразмерное покрытие ускоряет работу катализаторов на основе наночастиц золота
Наноразмерное покрытие ускоряет работу катализаторов на основе наночастиц золота
Scientific Reports: ИИ показал больший творческий потенциал, чем человек
Scientific Reports: ИИ показал больший творческий потенциал, чем человек
Ecology: Японские медведи в поисках пищи разоряют лесопосадки
Ecology: Японские медведи в поисках пищи разоряют лесопосадки
NSMBio: Исследование проливает свет на истоки неврологических заболеваний
NSMBio: Исследование проливает свет на истоки неврологических заболеваний
British Journal of Anaesthesia: Ученые выявили ошибку в работе пульсоксиметров
British Journal of Anaesthesia: Ученые выявили ошибку в работе пульсоксиметров
FEARC: Археологи используют фундук для реконструкции древних лесных массивов
FEARC: Археологи используют фундук для реконструкции древних лесных массивов
PRL: Ученые продвинулись в управляемом ускорении электронов в микромасштабе
PRL: Ученые продвинулись в управляемом ускорении электронов в микромасштабе
Лесовосстановления недостаточно для возмещения углерода от заготовки древесины
Лесовосстановления недостаточно для возмещения углерода от заготовки древесины
Blood: Создана новая стратегия поиска и уничтожения стволовых клеток лейкемии
Blood: Создана новая стратегия поиска и уничтожения стволовых клеток лейкемии
PNAS Nexus: Хоть горшком назовите, только учитывайте культурные различия
PNAS Nexus: Хоть горшком назовите, только учитывайте культурные различия
Nature Comm: Ошибка Пифагора вынуждает пересмотреть принципы создания музыки
Nature Comm: Ошибка Пифагора вынуждает пересмотреть принципы создания музыки
Открыт антивозрастной эффект витамина D и рецептора в средней кишке дрозофилы
Открыт антивозрастной эффект витамина D и рецептора в средней кишке дрозофилы
Physical Review Applied: Ниобий воскресили для квантовых технологий
Physical Review Applied: Ниобий воскресили для квантовых технологий
Journal of the American Heart Association: Сидячий образ жизни приближает смерть
Journal of the American Heart Association: Сидячий образ жизни приближает смерть

Новости компаний, релизы

НАИРИТ объявит итоги Всероссийского инновационного конкурса 21 февраля
НАИРИТ объявит итоги Всероссийского инновационного конкурса 21 февраля
«Инструменты инновационного развития»
«Инструменты инновационного развития»
3 причины перехода с печатной рекламы на цифровую
3 причины перехода с печатной рекламы на цифровую
Виды резервирования серверов для задач АСУ ТП
Виды резервирования серверов для задач АСУ ТП
Выбор клиники и лечащего врача с помощью специализированного сервиса
Выбор клиники и лечащего врача с помощью специализированного сервиса