Содержание
видео 360 и бинауральный звук / Хабр
Мы написали интересный доклад по технологиям виртуальной реальности для конференции EVA Florence 2015 (Флоренция, Италия). Статья нигде не публиковалась и, поскольку тема интересная и не слишком освещенная на Geektimes, решили разместить её здесь. Приводим адаптированный русский вариант статьи, в случае необходимости, любые дополнения, ссылки, примечания добавим.
Видео 360 + бинауральный звук
Введение
По мере эволюции компьютерной игровой индустрии и технологий виртуального представления объектов (3D-моделирование, фотопанорамы) одновременно совершенствовались устройства для индивидуального и коллективного погружения в среды виртуальной реальности. Подобные устройства и системы, за счет эффекта присутствия, позволяют человеку оказаться внутри виртуального мира: компьютерной игры, виртуального музея, виртуальной экскурсии и т.д.
В 2013 году появился прототип шлема виртуальной реальности нового поколения – Oculus Rift (Рис. 1.) от компании Oculus http://www.oculus.com, собравший более $90 млн. на краудфандинговых площадках в США, а также от различных инвесторов. Отличительной особенностью шлема Oculus Rift является линзовый способ построения изображения – зритель, надевший шлем, смотрит на стерео-изображение не напрямую, а через специальные асферические линзы. С помощью линз удалось существенно расширить угол обзора, сделав его близким к биологическому зрению человека (110° против 45-50° в обычных очках), благодаря чему шлем обеспечивает необыкновенно глубокое погружение в виртуальную реальность. Данная особенность определила дальнейшую судьбу очков – проект стал одним из самых динамично развивающихся в индустрии, по всему миру стали создаваться экспериментальные приложения для Oculus Rift, а в 2014 году произошла одна из рекордных сделок в индустрии – Facebook осуществил покупку компании Oculus за $2 млрд.
Рис. 1. Шлем виртуальной реальности Oculus Rift DK2 и пользователь, 2014 г.
Конец 2014 года был ознаменован появлением целого ряда различных шлемов (или, точнее сказать, — гарнитур) виртуальной реальности, построенных по аналогичному принципу и предназначенных для использования вместе со смартфоном. В гонку по созданию таких продуктов включились крупные компании — Samsung (Samsung Gear VR), Google (Google Cardboard), HTC (HTC Vive), также возникло множество стартапов по изготовлению шлемов – Homido (Франция), Fibrum (Россия), ColorCross (Китай) и другие (Рис. 2.).
Принципиальным отличием этих гаджетов от Oculus Rift являлось то, что перечисленные шлемы использовали в качестве экрана смартфон, вставляющийся внутрь шлема. Таким образом, отпала необходимость в использовании компьютера и соединительных проводов для подключения Oculus Rift, а стоимость шлема упала до $30.
Рис. 2. Гарнитуры виртуальной реальности
В настоящий момент (май 2015 г.) гарнитуры виртуальной реальности поддерживаются больши’м количеством компьютерных игр (Half-Life 2, Team Fortress 2, Mirror’s Edge, War Thunder,EVE Valkyrie (ex. EVR) от CCP, DCS: World, Ил-2 Штурмовик «Битва за Сталинград», Euro Truck Simulator 2, Minecraft, Live For Speed) и несколькими игровыми движками (CryEngine, Unreal Engine (версии 3 и 4), Unity, Unigine, Source, CopperCube, полный список. Виртуальную реальность можно просматривать и без шлема — вращая смартфон, но при этом существенно уменьшается эффект присутствия.
Появился и активно распространяется новый формат развлечений — аттракцион «виртуальная реальность», где клиент за небольшую плату может оказаться в 3D-мире. Один из таких аттракционов был собран и в Центре дизайна и мультимедиа ИТМО и неизменно пользуется успехом у зрителей (Рис. 3.).
Рис. 3. Губернатор Санкт-Петербурга Г.С. Полтавченко знакомится с аттракционом «Виртуальная реальность» (Санкт-Петербург, Россия, осень 2014 г.)
Использование гарнитур виртуальной реальности в образовательных и научно-исследовательских целях позволяет представлять объекты культуры (архитектурные объекты или музейные экспонаты) с новой степенью детализации и возможностями для просмотра пользователем.
Использование технологии видео 360° для культуры и искусства
С появлением гарнитур виртуальной реальности стало особенно актуальным направление фото и видео панорам, а также использование технологии Видео 360° в различных сферах – от музеев и интерактивных видео-экскурсий до съемки музыкальных и театрализованных представлений. В частности, концерт, записанный в таком формате, производит неизгладимое впечатление – зритель, надев шлем виртуальной реальности, оказывается прямо на сцене среди любимых музыкантов или актеров.
Центр дизайна и мультимедиа ИТМО в рамках проекта Video360Production одним из первых в России начал эксперименты по разработке технологии Видео 360 для шлемов виртуальной реальности. Один из первых экспериментов, проведенных совместно с Центром 3D-технологий СПбГУТ – съемка спектакля «Выбор» (театр «АХЕ», Санкт-Петербург, Россия, лето 2014 г.), адаптированная для воспроизведения в Oculus Rift DK1 (Рис. 4.).
Рис. 4. Спектакль «Выбор», в режиме стерео-пары (театр «АХЕ», Санкт-Петербург, Россия, лето 2014 г.)
Особенностью данной экспериментальной съемки являлось то, что съемка была произведена на обычную 3D-камеру — при просмотре через шлем виртуальной реальности пользователь видел стерео-эффект (для каждого глаза создавалась своя картинка), однако позиционирование по положению головы отсутствовало.
Большим успехом в разработке технологии Видео 360 стала съемка концерта Пола Маккартни, проведенная американской компанией Jaunt в августе 2014 г.
Рис. 5. Концерт Пола Маккартни, в формате 3D видео 360° («Live and Let Die», live at Candlestick park, San Francisco, США, 14 авг. 2014 г.)
В продолжение экспериментов по съемке культурно-массовых мероприятий с возможностью просмотра в шлеме виртуальной реальности, сотрудниками Центра дизайна и мультимедиа ИТМО было разработано специализированное оборудование для записи видео 360° для различных сценариев – статические сцены (камера стоит неподвижно в одной точке), динамические сцены (камера движется по выбранной траектории, управляемая дистанционно), различные способы крепления (катер, квадракоптер, шлем и др.).
Устройства для съемки видео 360°
Создание контента в формате видео 360° к настоящему моменту не является тривиальной задачей, несмотря на то, что разработано специализированное оборудование (видео-камеры 360°) и программное обеспечение для последующей обработки материала.
Постепенное распространение технологии можно объяснить целым рядом сложностей: большой объем обрабатываемых материалов, частично ручной процесс обработки, дороговизна оборудования, и, самое главное, — отсутствие удобного средства просмотра. Действительно, до появления гарнитур виртуальной реальности единственным способом просмотра видео 360° был специализированный плеер, в котором пользователь имеет возможность крутить мышкой видео «вокруг себя».
С появлением гарнитур виртуальной реальности ситуация изменилась – пользователь оказывается «внутри» видео и ощущает практически полную степень погружения в виртуальное пространство. В большом количестве появились различные творческие группы и стартапы, реализующие собственные технологические решения для съемки видео 360°, отличающиеся заметным разнообразием и характеристиками (Рис. 6-7).
Рис. 6. Различные компоновки камер для съемки фото и видео 360°
Особенно необычно выглядят решения, позволяющие снимать видео 360° в 3D формате (для каждого глаза создается своя видео-сфера, затем они совмещаются в специализированном плеере для воспроизведения). 3D видео 360° дает зрителю ощущение пространства более сильное, чем в обычном «моно» варианте, однако требует существенно больше ресурсов – как для обработки материалов, так и для решения различных технических задач. В частности, отдельной является проблема верхних камер и их размещения (таким образом, чтобы при любом повороте головы наверх зритель видел правильную картинку) (Рис. 7).
Рис. 7. Различные компоновки камер для съемки фото и видео 360,
включая стерео-компоновку для 3D видео 360 (на примере камер 360 Heros)
Бинауральный звук
Особой задачей при создании контента для виртуальной реальности, будь то 3D-моделирование или «Видео 360°» является запись и воспроизведение объемного звука – ведь пользователь, находясь в виртуальной реальности, должен слышать разный звук в зависимости от положения головы!
В компьютерных игровых движках эта проблема решена с помощью специальных программных средств, задающих расположение источников звука в виртуальном пространстве. Однако с появлением формата «Видео 360°» и возможности записи в этом формате музыкальных концертов, возникла необходимость записывать звук предельно точно – так, как его слышит человек, стоящий в определенной точке.
Для этой цели исследователи используют т.н. бинауральный звук – он записывается на специальные микрофоны, по форме повторяющие ушную раковину человека.
Рис. 8. Устройства для записи бинаурального звука от компании 3Dio
Одна из самых известных работ, снятых при помощи технологии бинаурального звука – концерт группы Beck:
Рис. 9. Beck, «Hello again» («Sound and Vision», 2013 г.)
Рис. 10. Beck, «Hello again» («Sound and Vision», 2013 г.)
Хостинг видео 360°
В связи с быстрым распространением технологии актуальным является вопрос организации хостинга для файлов в формате «Видео 360°». Важной составляющей такого хостинга является возможность не только воспроизвести видео с возможностью вращения мышкой, но и адаптация для гарнитур виртуальной реальности, как стационарных (Oculus Rift), так и мобильных.
В данный момент, полноценную поддержку «Видео 360°» осуществляют всего несколько сервисов – французский Kolor(на момент написания статьи куплен американской компанией GoPro), также частичную поддержку Видео 360 в 2015 году сделал Youtube (есть возможность вращения мышкой, но нет адаптации для гарнитур виртуальной реальности).
Борисов Николай Валентинович
Центр дизайна и мультимедиа, Университет ИТМО
Кафедра информационных систем в искусстве и гуманитарных науках, СПбГУ
Смолин Артем Александрович
Кафедра инженерной и компьютерной графики, Центр дизайна и мультимедиа, Университет ИТМО
Кафедра информационных систем в искусстве и гуманитарных науках, СПбГУ
Столяров Денис Андреевич
Центр дизайна и мультимедиа, Университет ИТМО
Кафедра математической лингвистики, СПбГУ
Наши контакты:
Проект Video360Production.com
[email protected] Столяров Денис
TimeLine VR360 — База заниний виртуальной реальности
x
Используя наш сайт, Вы соглашаетесь с тем, что ООО «Таймлайн» может использовать технологию «куки» (cookie), позволяющую сохранить определенную информацию на вашем устройстве во время посещения нашего сайта, в соответствии с Политикой конфиденциальности.
We use cookies to ensure you get the best experience on our website. Please review our Privacy Policy for more information and/or to change your cookie settings at any time. If you continue to use this site, you consent to our use of cookies.
Главная > Решения и технологии > VR360˚ > База знаний VR 360
Видео в формате 360° создается с помощью панорамной камеры, позволяющей одновременно записывать все 360 градусов изображения или с помощью компьютерной графики. Зрители могут менять угол и перспективу видео 360°.
При просмотре видео 360° на компьютере, угол обзора можно менять с помощью мыши.
Обязательно используйте самую последнюю версию браузера (например, Chrome, Firefox). На сегодняшний день, Видео в формате 360° нельзя посмотреть в браузерах Safari или Internet Explorer.
При просмотре видео 360° на мобильных устройствах iOS и Android угол обзора можно менять, проводя пальцем по экрану или направляя устройство в нужную сторону.
Обязательно используйте самую последнюю версию Интернет браузера или приложений. Для просмотра видео 360° на платформе iOS потребуются устройства не старее iPhone 4S или iPad 2. На устройствах iOS также должна быть установлена ОС не старее iOS 7. На устройствах Android должна быть установлена ОС не старее версии 4.3.
На сегодняшний день существует 4 основных способа просмотра контента виртуальной реальности (VR) или видео 360 градусов.
С помощью специальных очков или шлема виртуальной реальности, на мобильном телефоне или компьютере, с помощью установленного плеера или через вэб браузер, поддерживающий формат VR.
Если у вас возникли вопросы, пожалуйста свяжитесь с нами для решения ваших задач
Видео продакшн
Создание видеоконтента
Контент для видеостен
Видеоконтент для мероприятий
Интерактивный контент
Видеодизайн
Сценический видеодизайн
Рекламные ролики
Корпоративные фильмы
Видеосъемка
Постпродакшн
Адаптация рекламных роликов
Мастеринг DCP
Руководство
База знаний
Быстрый заказ DCP
Конвертация в IMF
Продукты
Подбор оборудования
Галерея
Продакшн мероприятий
Менеджмент
Техническое обеспечение
Шоу и концерты
Церемонии
Выставки и конференции
Презентации
Инсталляции
Мультимедийный дизайн пространств
Выставочные стенды
Концертные залы
Музеи и выставки
Магазины и торговые центры
Аренда оборудования
Видеостены
Проекторы и экраны
Съемочное оборудование
Интерактивные киоски
Управление экранами
Решения и технологии
Видеотехнологии
Интерактивные технологии
Иммерсивные технологии
Кинетические системы
Видеопроекторы и экраны
Профессиональные дисплеи
Уличные экраны
Видеостены
Светодиодные экраны
Управление экранами и видеоконтентом
Дополненная реальность
Digital Signage
Виртуальная реальность
VR приложения
Производство видео 360°
VR-презентации
Онлайн трансляции VR
Камера VR360
Музеи и выставки
Спорт
Туризм
События и концерты
Недвижимость
База знаний VR
Digital Signage
Продукты
Вокзалам и аэропортам
Ресторанам и кафе
Магазинам и торговым центрам
Транспорту
Кинотеатрам
Отелям и гостиницам
Банкам
Учебным заведениям
Агентствам недвижимости
Медицинским центрам
Музеям и выставкам
Турагенствам
Компаниям
Уличные экраны
Медиаплееры
Контент для экранов
Шаблоны и виджеты
Реклама в кинотеатрах
Размещение
Перевод в DCP
Интерактивные игры
Конвертация в 3D
О TimeLine
О компании
Новости
Шоурил
Портфолио
Вакансии
База знаний
Правовая информация
Реквизиты компании
Способы оплаты
Как нас найти
Партнерам
Контакты
Подпишитесь на нас:
VK
YouTube
Vimeo
Twitter
Telegram
Молодая женщина надевает гарнитуру и смотрит на чудеса, как удивителен виртуальный мир — Стоковый видеоролик © Gorun #383400714
Изображения
ВидеоРедакцииМузыка и звуковые эффекты
Инструменты
Предприятие
Цены
Все изображения
ВойтиРегистрация
Уже есть аккаунт 9001,
создать аккаунт? Войти
Я согласен с Пользовательским соглашением. Получать новости и специальные предложения. Шлем виртуальной реальности на желтом фоне — Видео от Gorun
- Найти похожие видео 7.96 См. планы видео
См. планы видео
Similar Royalty-free Videos:
Кадры вида спереди привлекательной молодой модели в желтом топе в паре с узкими джинсами и шлемом на голове, руки на бедрах, а затем снятием шлема, виляющими волосами. КИЕВ, УКРАИНА — 24 ФЕВРАЛЯ 2020: Злая женщина бросает джойстик, изолированный на желтом Азиатская стюардесса фотографирует на поляроиде, изолированном на цветном зеленом фоне экранаЭнергичная молодая леди с длинными светлыми волосами в вязаном топе с длинными рукавами и обтягивающими джинсами, в мотоциклетном шлеме на голове .Счастливая молодая красивая девушка на желтом фоне. привлекательной дамы, стоящей в левом конце кадра в шлеме на голове и позирующей, обхватив голову руками. женщина, крутящаяся с раскинутыми руками. Студия изолированных выстрел на фоне зеленого экранаДеловая женщина, работающая в офисе (зеленый экран, альфа) Смешная красивая женщина в шляпе, радостно улыбается, высунув язык на камеру, изолированные на желтом фоне. Кавказская женщина позирует в помещении. Снимок привлекательной молодой модели, снимающей шлем с головы, покачивающей длинными светлыми кудрявыми волосами, а затем держащей шлем за бедра, в то время как мягкий ветер развевает ее волосы. Улыбающийся путешественник с рюкзаком, уходящий изолированным на желтом фон в замедленной съемке. Женщина ловит деньги с жадным взглядом в глазах. Портрет улыбающейся молодой женщины в красной повседневной куртке, оглядывающейся назад и показывающей большие пальцы на ярко-желто-оранжевом фоне стены в студии. Концепция образа жизни людей. Девочка-подросток в черной хип-хоп одежде и кепке танцует на белой стене — крупный план, съемка с рук, небольшая глубина резкости. выстрел молодой красивой женщины на белом фоне0014 Подробнее
Та же модель:
Подробнее
Информация об использовании
Вы можете использовать это видео без лицензионных отчислений «Молодая женщина снимает виртуальную гарнитуру, оглядывается и задается вопросом, как удивительно в мире виртуальной реальности. Шлем виртуальной реальности на желтый фон» для личных и коммерческих целей в соответствии со Стандартной лицензией. Стандартная лицензия охватывает большинство вариантов использования, включая рекламу и дизайн пользовательского интерфейса на веб-сайтах и в приложениях.
Вы можете купить этот видеоматериал и скачать его в высоком разрешении до 3840×2160.
DepositPhotos
Язык
Информация
- Часто задаваемые вопросы
- Все документы
- Доступны на
- .
- +49-800-000-42-21
- Контакты
- Depositphotos Отзывы
© 2009-2022. Depositphotos, Inc. США. Все права защищены.
Вы используете устаревший браузер. Чтобы работать в Интернете быстрее и безопаснее, бесплатно обновитесь сегодня.
Девушка в очках виртуальной реальности смотрит видео в 360-градусном шлеме виртуальной реальности, сидя на качелях.
— Стоковый видеоролик © svmedia21.gmail.com #117309908
Девушка в очках Vr, смотреть видео в 360 градусов шлем виртуальной реальности, сидя на качелях. — Стоковый видеоролик © svmedia21.gmail.com #117309908
Изображения
ВидеоРедакцииМузыка и звуковые эффекты
Инструменты
Предприятие
Цены
Все изображения
ВойтиРегистрация
Чтобы скачать это видео, 008
уже создали аккаунт? Войти
Я согласен с Пользовательским соглашениемПолучать рассылку новостей и специальных предложений
Девушка в VR очках смотрит видео 360 градусов в шлеме виртуальной реальности на улице. HD. — Видео от svmedia21.gmail.com
Новые
Видео в формате Full HD и 4K от 7,96 €Посмотреть планы на видео
Посмотреть планы на видео
Похожие видео без лицензионных платежей:
Молодая женщина играет в игру, используя VR-шлем для смартфонов. Виртуальное пространство, устройство дополненной реальности. 1080p.Брюнетка использует очки виртуальной реальности на крыше. 4kВзрослый мужчина осматривается на открытом воздухе через объектив очков виртуальной реальности Испуганный мужчина использует очки виртуальной реальности и смотрит мультимедийный 3D-контент, сидя в кресле в паркеЧеловек в парке в красной футболке надевает на голову шлем виртуальной реальности. Кадры 4KМужчина надевает на голову VR-шлем в парке. Молодой парень в красной футболке и шлеме переживает виртуальную реальность на фоне природы. Слева в кадре человек. Кадры 4K. Мужчина надевает на голову VR-гарнитуру в парке. Молодой парень в красной футболке и шлеме переживает виртуальную реальность на фоне природы. Человек справа в кадре. Крупный план. Видеозапись 4K. Девушка в очках VR смотрит видео в шлеме виртуальной реальности на 360 градусов на открытом воздухе. HD.A человек, использующий гарнитуру VR в парке и поворачивает голову вниз. Молодой парень в красной футболке и шлеме переживает виртуальную реальность на фоне природы. Человек справа в кадре. Кадры 4K. Мужчина в парке в красной футболке надевает на голову шлем виртуальной реальности. 4K кадрыКрасивая молодая женщина, играющая в виртуальный аттракцион, качается на открытом воздухе. Виртуальная реальность 3D современные технологии. Женщина HD.Young исследует виртуальную реальность, используя очки VR. Дополненная реальность быстро входит в повседневную жизнь человека. Шлем и очки виртуальной реальности — самые популярные устройства для игр и наслаждения AR. Человек использует очки виртуальной реальности, снимите их. Взволнован, впечатлен новыми современными технологиями. HD.Человек в очках виртуальной реальности в парке движется и взаимодействует с виртуальным миромМальчик сидит на лестнице в виртуальных очках рядом с велосипедом BMX 4kОпыт виртуальной реальности Маленький мальчик, имеющий опыт виртуальной реальности в квартиреОпыт виртуальной реальности Маленький мальчик играет в файтинг с помощью гарнитуры виртуальной реальности на заднем двореПрофессиональный оператор дрона в шлеме виртуальной реальности стоит перед строительной площадкой. Строитель держит пульт дистанционного управления. Офисное здание и фон крана. Бизнес, недвижимость и
Подробнее
Та же модель:
Подробнее
Информация об использовании
Вы можете использовать это бесплатное видео «Девушка в очках виртуальной реальности, смотрит видео в 360-градусном шлеме виртуальной реальности, сидя на качелях». для личных и коммерческих целей в соответствии со Стандартной лицензией. Стандартная лицензия охватывает большинство вариантов использования, включая рекламу и дизайн пользовательского интерфейса на веб-сайтах и в приложениях.
Вы можете купить этот видеоматериал и скачать его в высоком разрешении до 1920×1080.
DepositPhotos
Язык
Информация
- Часто задаваемые вопросы
- Все документы
- Доступны на
- .
- +49-800-000-42-21
- Контакты
- Depositphotos Отзывы
© 2009-2022. Depositphotos, Inc.
Видео виртуальной реальности шлем: VR BOX — Купить шлем виртуальной реальности. Цена, описание, примеры видео