Что такое виртуальное производство XR?

Введение: Благодаря развитию индустрии виртуальных развлечений все больше и больше телевизионных и онлайн -программ начали использовать технологию виртуального вещания в больших масштабах. Недавно XR технология начала появляться на крупных вечерних вечеринках, включая гала-концерт Spring Festival, который освежает аудиторию.

На захватывающем виртуальном концерте девушки -группы «Город виртуальной реальности» в прошлом месяце Iqiyi, который делает ставку на виртуальное производство, еще раз продемонстрировала «сказочные» визуальные эффекты визуальных технологий виртуального производства XR. Подобно «мохито» Джея Чоу на гала -концерте в этом году, можно сказать, что технология XR является революцией в выразительности и инновациях индустрии контента.

▼ The9 Girl Group "Город виртуальной реальности" Погруженный виртуальный концерт

Виртуальная производительность XR "Mojito" завершил удаленно и синхронно в разных местах на гала -концерте весеннего фестиваля

В 2019 году Forbes предсказал, что рынок XR, как ожидается, вырастет 8 раз в течение следующих двух лет, а к 2022 году размер рынка превысит 209 миллиардов долларов США.

1. Что такое XR?

2 Почему это так популярно в последнее время?

3 Как работает XR в производстве?

4 Каково соединение и разница между XR и виртуальным производством?

5 Что такое виртуальное производство XR?

6 XR Производственный чехол

7 В заключение

Что такое XR?

▼ Виртуальные выступления и живые трансляции с использованием технологии XR

XR (расширенная реальность) - это термин, используемый для описания среды или интерактивного поведения, который объединяет виртуальные и реальные элементы. Хотя обычно считается, что XR включает AR (дополненную реальность), VR (виртуальную реальность) и MR (смешанная реальность), он имеет особое значение в фильмах, телевидении, вещании и производстве живых развлечений. В настоящее время XR стал основным потоком виртуальной индустрии вещания.

Почему это так популярно в последнее время?

▼ Расширение виртуальной среды виртуальной стадии XR

В описании отрасли несколько лет назад XR больше был похож на общее описание технологии AR и VR. Его можно использовать для обозначения интегрированной системы, которая включает в себя виртуальные и реальные миры, и даже может быть эквивалентно конкретной технологии захвата движения, приложения AR или VR -игры. Но в области производства контента он конкретно называется рабочим процессом, который включает в себя светодиодные дисплеи, системы отслеживания камеры и мощные графические двигатели. Это виртуальный метод производства, который помещает исполнителей в виртуальном мире в режиме реального времени без зеленых экранов и процессов постпроизводства.

▼ Sci-Fi Music Stage, созданная XR

Как работает XR в производстве?

В производстве XR высококачественные светодиодные экраны (обычно представленные в виде кольцевых экранов или сферических экранов) одновременно отображают 3D виртуальные среды, предварительно загруженные графическими двигателями (обычно с использованием нереального двигателя или Notch), и эти светодиоды также образуют фон для съемки или живых событий. Когда добавляется точная система отслеживания камеры, камера начинает перемещаться вокруг реальных и виртуальных элементов, которые плавно объединяются в светодиодной среде, давая аудитории, которая наблюдает через перспективу камеры иллюзию слияния и погружения.

▼ Типичный макет и установка виртуальной сцены XR

Преимущества производства XR:

Иммерсивный и процесс редактирования в реальном времени

Актеры, хозяева и производители могут видеть виртуальную среду на месте, позволяя им регулировать и направлять выступления или съемки на месте, сокращая время и бюджет, потраченные на пост-продакшн. Проще говоря, это «предварительное положение постпроизводства». Кроме того, виртуальное производство решает транспортные расходы экипажа и затраты на ожидание окружающей среды для съемки местоположения. Проще говоря, вы можете воспроизвести и изменить необходимую среду в любое время, не ожидая дождя или заката.

▼ Виртуальная погода вещание с использованием технологии XR

Реальное интерактивное освещение на месте:

Освещение обеспечивается экраном светодиодного дисплея на сайте XR, который помогает бесшовной интеграции реальных людей и виртуальных средами и сокращает время для дальнейших настройки освещения. Это особенно подходит для съемки реальных объектов с высокой отражательной способностью, которая требует реальной информации о размышлении окружающей среды и освещения без необходимости постсинтеза.

▼ Взаимодействие с использованием отслеживаемого и позиционного освещения реквизита

Без переполнения цвета и матового синтеза:

В традиционных средах для съемки зеленого экрана часто требуется много времени, чтобы выполнить мелкую матовую обработку и исправления проблем переполнения цвета, в то время как XR вообще не требует матовой части, а сцена непосредственно из объектива.

▼ Переключение из виртуальной среды XR обратно на реальный светодиодный экран на сайте

Быстрая коррекция объектива:

При традиционной съемке зеленого экрана время коррекции объектива виртуальной камеры часто занимает несколько часов, в то время как коррекция системы отслеживания виртуальной камеры на камере XR занимает всего несколько минут, что значительно уменьшает время прерывания и подготовки на месте и позволяет снимать в нескольких сценах и сценариях сеанса в течение короткого времени.

▼ Свободно собранные и расширяемые светодиодные модули

Каково соединение и разница между XR и виртуальным производством?

На самом деле, многие люди сомневаются. Многие экран XR недавно связаны с виртуальными студиями, вечерними вечеринками и виртуальными пресс -конференциями. Используется ли XR для вещательных мероприятий? Это неправильный взгляд. XR используется не только в живых трансляциях и других видах деятельности, но также может использоваться для виртуального производства фильмов и телевидения, а также вице -президента (виртуальное производство), которое мы часто упоминали ранее. Виртуальное производство можно просто рассматривать как рабочий процесс использования VR и Game Technologies для съемки фильмов.

▼ Светодиодный виртуальный производственный сайт американского сериала «Mandalorian», аналогичный XR, упомянутому ранее, виртуальное производство также опирается на фон, предоставляемый светодиодным экраном в качестве окружающей среды, но земля часто строится с реальными материалами для декораций, и все производственные процессы собираются через камеры, без необходимости расширения вне светодиодного экрана. Среда xr Virtual Studio, которую мы часто видим, имеет светодиодный экран пола и требует синтеза виртуального расширения светодиодной внешней среды. Кроме того, виртуальное производство в значительной степени зависит от сотрудничества художественного отдела и виртуальных художников для создания реального и виртуального качества среды.

▼ Типичный xr виртуальный производственный светодиод и установка оборудования

На самом деле, виртуальное производство, основываясь на проекции, не является новой вещью. Еще в 1930 -х по 1960 -е годы в Голливуде многие фильмы использовали технологию задней проекции. Актеры стояли перед экраном с изображением, спроецированной на нем, которая часто использовалась для съемки движущейся среды за пределами окна автомобиля под фиксированной линзой. Но в то время он использовался только в качестве дополнения к обычной съемке из -за отсутствия системы отслеживания камеры.

▼ Технология задней проекции, используемая Джеймсом Бондом в фильме 007

Отраслевое применение XR:

Корпоративная деятельность:

Сегодня компании все чаще рассматривают XR как новый способ решить проблему встреч на большие расстояния. Виртуальные встречи, виртуальные презентации и даже запуска продуктов могут использовать технологию XR для улучшения захватывающего опыта участников и заставить их по -настоящему чувствовать культуру и концепцию бренда.

▼ Гости отдаленно переданы на светодиодный экран XR через синтез зеленого экрана

▼ Место установки виртуальной студии в помещении

Образование:

XR может погрузить студентов в отдаленное обучение в реалистичных сценах, позволяя студентам лучше понять и изучать знания в моделируемых виртуальных ситуациях и оставлять глубокое впечатление.

▼ Отображение текстуры заземления, приводящая к эффекту AR в камере

Фильм:

XR предоставляет возможности для съемки фильмов, сокращения времени в пути для персонала и контактных рисков во время эпидемии. В постпроизводстве светодиодные экраны могут обеспечить более быстрые, более простые и более качественные альтернативы зеленым экранам, сокращать циклы производства и принимать более творческие визуальные решения в режиме реального времени.

▼ Ведущий виртуальный производственный сайт "Solo: A a Star Wars Story"

Телевизионная студия :

В студийной среде светодиодные экраны обеспечивают четкий контент и освещение высокого разрешения в режиме реального времени. Хотя камеры необходимы для их сбора в конце, контент в реальном времени позволяет хосту лучше взаимодействовать с виртуальной средой, а не слепо догадываться и наступать на место, как и раньше.

▼ Виртуальная студия студии xite

Музыкальный экран :

Художники VJ могут использовать XR для управления и представления живых музыкальных клипов, позволяя двигателю создавать импровизации в реальном времени для создания неограниченных повествовательных возможностей и позволить аудитории чувствовать чудесный мир за пределами сферы светодиода.

▼ Применение технологии XR на интерактивном этапе VJ Music

Киберспорт :

Светодиодные экраны производят реальные отражения и тени, которые могут уменьшить рабочую нагрузку постпроизводства. Более авангардная и развлекательная сцена электронных видов спорта очень подходит для помощи и интерпретации XR, позволяя виртуальным существам и персонажам в игре появляться реалистично на арене, а аудитория и исполнители могут видеть содержание CG и взаимодействовать с ним более реально.

▼ Xr Synthetic Live Transcast в игре WePlay Dota2 E-Sports

Основные технологии производства XR :

Технологии, используемые XR, упрощены следующим образом: система отслеживания камеры, программная платформа Virtual Studio, медиа-сервер, двигатель рендеринга в реальном времени и т. Д.

С момента фильма 1998 года «Run Lola Run» индустрия игр тонко оказала влияние и проникло в кино, телевидение и новые медиа -индустрии, и даже изменила эстетические привычки аудитории, заставив современных людей привыкать к быстрым темпам игр и более захватывающих субъективных выстрелов. Разработчики основных игровых двигателей (Unity 3D, Unreal) также амбициозно входят в области за пределами игровой индустрии, такие как анимационные фильмы, выступления и т. Д. Рендеринг в реальном времени, специально предназначенные для сценических выступлений, также начали появляться (например, Notch).

▼ Виртуальная среда и интерактивные виртуальные реквизиты, сделанные с помощью двигателя Notch

Виртуальные сцены, как правило, предварительно изготовлены в нереальном двигателе или двигателе Notch. Ранее необходимо было моделировать в программном обеспечении DCC, таких как C4D и Maya, импортировать двигатель, добавить свет и текстуры, устанавливать анимации и заранее выполнять интерактивные тесты.

▼ Рабочий интерфейс Notch и эффективность абстрактных эффектов частиц

▼ Рабочий интерфейс Unreal Engine и производительность бетонных сцен

Начиная с предпочтения двигателя, Notch может обеспечить лучшую производительность динамических частиц в реальном времени, подходящих для визуальных проектов с высокой динамикой, таких как VJ, или используется отдельно для производства эффектов AR на переднем плане XR. Unreal более склонен производить бетонные и сложные сцены, с более упакованными инструментами и плагинами для помощи, и может быстро создать реалистичные эффекты.

▼ Картирование изображений виртуальных и реальных пространств xr сцены

Поскольку технология виртуального вещания становится более разнообразной и сложной, такие функции, как 3D-предварительный просмотр в реальном времени, стереоскопическая проекция (3D-картирование), интерактивные эффекты в реальном времени и мультимедийное управление вещанием файлов, начали интегрироваться с помощью серверов, а аппаратные устройства с различными функциями могут быть легко связаны с серверами.

▼ СМИ сервер и трансляции, связанное с управлением, на этапе XR

В виртуальных проектах xr замаскированный сервер и платформа используются в основном дома и за рубежом. Его медиа -сервер эквивалентен мосту между реальным миром и виртуальным миром. Он соответствует информации о движении виртуальной камеры с реальной камерой и отображает информацию об изображении на светодиодном экране и расширяет ее вне диапазона. Его функции также включают коррекцию камеры и объектива, картирование пространства, коррекцию цвета и поддержку для рендеринга, таких как Unreal, Unity и Notch.

▼ Система отслеживания и позиционирования MO-Sys Startracke ведущий

При выборе оборудования для отслеживания, аналогично виртуальному производству, оборудованию и услугам, поставщикам оборудования и услуг, включают: MO-SYS, Stype, BlackTrax, Optytrack, Vicon и т. Д., Которые разделены на активные и пассивные инфракрасные оптические захваты, и их данные отслеживания и корректировки позиции могут быть интегрированы в медиа-сервер.

▼ Optytrack Optical Motion System, которая была приобретена отечественной компанией

В дополнение к программному обеспечению Virtual Studio, предоставленному замаскированным, команда также может использовать решения для виртуальной студийной программной платформы от других брендов, таких как Pixotope, нулевая плотность, мозговой шторм и т. Д.

▼ Операционный интерфейс Pixotope, программная платформа виртуальной студии

▼ Блок-схема структуры решений с одной камерой Pixotope, программной платформы Virtual Studio

Решение Pixotope в основном используется в крупномасштабном вещании, спортивных мероприятиях, электронных видах спорта и других областях живого вещания, таких как «Суперкубок», финал Лиги Легенд и Европейская телевизионная сеть.

▼ Пространственная связь между виртуальными сценами программного обеспечения Pixotope и реальными синтетическими элементами

Pixotope-это открытое программное решение для быстрого создания виртуальных студий, дополненной реальности и графики в реальном времени. Он имеет мощное коммерческое оборудование, разработанное специально для подключения к технологиям других партнеров и внешних источников данных. Как и нулевая плотность, Pixotope - это собственное программное решение Virtual Studio, основанное на нереальном двигателе.

▼ Виртуальное реалити -шоу "Потерянный во времени"

На церемонии открытия чемпионата мира по League of Legends of League of League of League of Legends, состоявшейся в Инчхоне, Южная Корея, виртуальная идола K/Da Girl Group идеально исполнила реалистичную AR Dance Music «Pop Star» благодаря технологии, предоставленной Pixotope, привлекая более 90 миллионов онлайн -зрителей, включая аудиторию.

▼ Финал League of Legend

▼ Виртуальная идольская трансляция League of Legends Virtual Idol AR, состоявшаяся в Шанхае, Китай

С точки зрения выбора светодиодных брендов, много фильмов, сериалов или короткометражных фильмов, включая «The Mandalorian», «First Man on the Moon» и «Westworld», в основном используют светодиодные продукты от бытовых брендов, таких как серия Black Pearl и сериал Diamond, чьи светодиодные тона варьируются от 2,6 мм до 5,2 мм и выбираются в соответствии с расстоянием от камеры на светодиодную панель. Кроме того, светодиодная полноцветная серия малых точечных точек, приведенных в пользу домашних производителей, также является первым выбором для многих виртуальных пресс-конференций и элегантных шоу и телевидения.

▼ Светодиодные экраны серии Roe BP2 и CB5 были использованы в «Мандалорском»

Виртуальное производство серии Disney + Star Wars "The Mandalorian"

В 2019 году Джон Фавро, продюсер, который закончил снимать «Король Льва», впервые использовал технологию XR в серии «Звездные войны Диснея», «Мандалорийский», снимая половину сцен в светодиодной среде. Команда Favreau построила светодиодный экран высотой 20 футов (кольцевой экран 270 °), чтобы предоставить актерам и сотрудникам фотореалистичные среды для таких сцен, как замороженные планеты и бесплодные пустыни, что экономит много времени для установленного строительства, переключения опоры и переноса трафика в пространстве диаметром 75 футов.

Что такое виртуальное производство XR?

▼ За кулисами виртуального производства первого сезона «Мандалорца»

Живое выступление рэпера Дейва на Brit Awards :

На премии Brit Awards 2020 года Дейв завершил увлекательное виртуальное и реальное представление рядом с фортепиано, созданным XR. С помощью системы отслеживания камер MO-Sys, эффектов частиц Notch и проекционного сервера маскировки, на пианино отображались реалистичная трехмерная анимация. В сочетании с точным движением камеры мелодия и визуальный опыт всей песни достигли кульминации.

▼ Закулисные кадры выступления Дейва

Выступление Кэти Перри в финале American Idol :

Живая трансляция финала American Idol была создана и реализована технологически продвинутой командой XRStudios для проектов XR, используя медиа -сервер Magcuise, а спецэффекты были созданы командой Silent Partner Studios в Notch VFX. Многие люди любопытны в этом спектакле

Экраны XR могут легко смешиваться в окружающую среду и обеспечивать потрясающие визуальные дисплеи. Используя уникальные функции и преимущества светодиодных экранов, вы можете создать привлекательный и захватывающий опыт. Если вы хотите узнать больше, пожалуйста, свяжитесь с Lodful.