Популярность виртуального производства в сфере создания контента с каждым годом растёт. Сегодня оно вышло за пределы своей первоначальной области применения – спортивных трансляций и живых концертов, и стало мейнстримом почти во всех направлениях медиаиндустрии.

Обсудить, что такое виртуальное производство и как извлечь из него максимальную пользу мы пригласили директора студии TDS Virtual Production Константина Герасимова.

– Что такое виртуальное производство и почему оно становится столь популярным?

Виртуальное производство – это совмещение кадров живой съёмки с виртуальной графикой в режиме реального времени.

18 международная выставка-конференция оборудования и услуг для кино- и телепроизводства CPS/TKT 2022  состоится 23-25 марта в Москве на территории киностудии «Амедиа». Регистрация по ссылке.

Типичными вариантами использования могут быть дополненная реальность, когда графика накладывается поверх отснятых изображений, или виртуальная студия, где зеленый фоновый цвет заменяется компьютерными декорациями или локацией. В последнее время большую популярность набирает XR, при котором вместо традиционного хромакея для отображения созданного компьютером (CG) контента используются светодиодные экраны.

Виртуальное производство в реальном времени существует уже более 20 лет. С тех пор, как кинематографисты впервые начали экспериментировать с виртуальной реальностью, чтобы управлять движением камеры или накладывать виртуальный мир на живое изображение в режиме реального времени, чтобы предоставить съёмочной группе больше информации.  Но только в последние несколько лет качество графики стало достаточно хорошим, чтобы картинка получалась по-настоящему достоверной и зритель ей верил. Технологии стали более доступными – Epic Games значительно расширили границы анимации и эффектов в реальном времени с помощью движка Unreal Engine.

И, конечно, ключевую роль в резком скачке роста популярности виртуального производства сыграла пандемия. Ограничения на поездки и заоблачные расходы на страхование изменили процесс создания контента навсегда.

– Виртуальное производство – это ещё одна технология, используемая для создания контента, или нечто большее?

Виртуальное производство — не просто технология для создания вау-эффекта, это совершенно другой вид рабочего процесса, это новый способ ведения дел, мышления. Его особенность в том, что вы видите готовую картинку в режиме реального времени и можете сразу вносить коррективы.

Здесь ключевую роль играет подготовка. Принятие решений, создание компьютерного контента происходит «до моторов». То есть мы как бы разворачиваем рабочий процесс в обратную сторону. Если раньше все виртуальные эффекты создавались в постпродакшн, то теперь это наоборот становится первым этапом производства. Такое построение процессов позволяет иначе распределять ресурсы, а ключевым лицам, принимающим решения, переключаться с производства на новые проекты.

– Какие технологии виртуального производства сейчас наиболее востребованы?

За последние пару лет набрали обороты съёмки на фоне светодиодных экранов – в XR. Именно так снимали американский сериал «Мандалорец», получивший 14 премий Эмми, который в значительной степени повлиял на развитие виртуального производства.

По сравнению с традиционным хромакеем светодиодные экраны позволяют съемочной команде просматривать конечный контент сразу через камеру. В свою очередь люди, находящиеся в кадре, имеют возможность видеть локацию вокруг себя, что значительно облегчает их работу.  В сочетании с системой трекинга камер и игровыми движками светодиодные экраны становятся окном в виртуальную среду. При просмотре со съёмочной камеры мы получаем настоящую глубину и перспективу в компьютерной среде, которая изменяется вслед за движением камеры.

Также сейчас активно развивается технология захвата движения, лицевой анимации и создания цифровых персонажей. Аватары могут в режиме реального времени интегрироваться как в реальные, так и виртуальные декорации. Особенный интерес к ним возник после музыкального шоу AlterEgo на телеканале Fox, в котором на сцене вместо людей выступают их виртуальные аватары. Ничего подобного в режиме реального времени и в таком масштабе ранее не делалось. Шоу AlterEgo показало, что цифровые аватары готовы к прайм-тайму. Это новая страница в эпохе телевидения.

– Насколько технологии виртуального производства сейчас доступны? Остаются ли они очень дорогими и сложными в использовании?

Виртуальные технологии развиваются и становятся демократичнее. Сегодня мы обладаем решениями, которые делают их доступными не только для масштабных производств, но и для небольших проектов.

В прошлом году в рамках 17-ой международной выставки CPS 2021 мы продемонстрировали, как могут применяться технологии виртуального производства на проектах разного формата. На территории киностудии «Амедиа» мы открыли съемочный XR-павильон, который получил название «Павильон 7» (https://7pavilion.com).

В нем были установлены три съёмочные локациями с готовыми экранными сборками разной конфигурации. Мы показали не только возможности XR, но и как такие готовые решения для съемок под ключ могут сделать виртуальное производство дешевле, быстрее и доступнее для всех.

Конечно, виртуальный продакшн — это не автономная услуга по каталогу, а сложная система. Но мы ищем пути оптимизации. К примеру, мы создаем библиотеку готовых виртуальных миров и эффектов. Если нет необходимости создавать уникальные декорации, можно использовать готовые локации, которые мы просто адаптируем под проект, а не создаем с нуля. Это существенно сокращает сроки и стоимость проекта.

А если говорить в целом, то главная проблема сейчас не в доступности технологий на рынке. Основная трудность, с которой сегодня сталкивается виртуальное производство – это ограниченный кадровый резерв. Технология есть, а вот людей, способных ее использовать нет. Мы ищем талантливых специалистов из смежных областей и обучаем их. Но этого мало. Чтобы добиться успеха в виртуальном производстве, поставщикам, заказчикам и креативным компаниям нужно объединить усилия и совместно работать над обучением специалистов. Так мы создадим волну, на которой поплывет наша общая лодка.

– Какое будущее у этих технологий?

Виртуальное производство никуда не денется. Оно не заменит полностью традиционные рабочие процессы, но постепенно его популярность будет расти, а новые технологии откроют двери для адаптации большего количества производств.

Опыт показывает, что ввод виртуальных данных в режиме реального времени повышает вовлеченность зрителей и больше погружает их в само событие.

Мы пока не знаем всех возможностей этой технологии. Поэтому сегодня создателями контента и съёмочным студиям важно быть максимально открытыми и гибкими, чтобы использовать как можно более широкий спектр инструментов виртуального производства.

Сообщение Виртуальный продакшн — главный тренд в производстве медиа появились сначала на TKT 1957 | Техника Кино и Телевидения.