Современный кинематограф и производство видеоконтента переживают технологическую революцию, стирающую грань между физической реальностью и компьютерной графикой. Ведущая канала Huge If True Клео Абрам (Cleo Abram) и популярный техноблогер Маркес Браунли (Marques Brownlee) отправились в нью-йоркскую студию ZeroSpace Studios, чтобы лично протестировать три передовых инструмента виртуального продакшена. Эти технологии уже меняют стандарты Голливуда, сокращают бюджеты кинокартин и постепенно становятся доступными для независимых авторов контента.
📺 Экранные миры: эволюция XR-сцен и решение проблемы «зеленого экрана» 1:13
Традиционный зеленый или синий экран (хромакей), использовавшийся в киноиндустрии десятилетиями, постепенно уступает место технологии XR-сцен (Extended Reality). В своей простейшей форме XR-сцена представляет собой гигантский светодиодный LED-экран, на который выводится любое трехмерное окружение. Однако ключевое отличие современной виртуальной студии от старых методов рир-проекции (когда позади актеров просто запускали видеозапись) заключается в динамическом взаимодействии фона с камерой.
Главным недостатком старых технологий было отсутствие эффекта, известного как моушн-параллакс. В реальной жизни при движении камеры объекты на переднем плане смещаются быстрее, чем объекты на заднем плане. Если фон статичен, человеческий глаз мгновенно замечает подвох.
Современная XR-система решает эту проблему с помощью пошагового алгоритма синхронизации оборудования:
- Позиционирование: На съемочную камеру устанавливается специальный датчик отслеживания (трекер), который непрерывно передает данные о положении камеры в пространстве.
- Генерация «динамического окна» (Frustum): Графический движок виртуальной сцены мгновенно пересчитывает перспективу трехмерного фона под конкретный угол обзора съемочного объектива. На LED-стене формируется подвижная зона, отображающая корректную картинку для камеры, в то время как остальная часть экрана может показывать фоновое заполнение для актеров.
- Естественное освещение: Виртуальное окружение на LED-панелях (включая потолок студии) излучает реальный свет и тени на актеров и реквизит.
Это полностью решает проблему так называемого «спилла» (зеленых или синих отражений), с которой постоянно сталкиваются специалисты по визуальным эффектам при работе с хромакеем. Устранение цветных рефлексов на постобработке — крайне трудоемкий процесс, особенно если в кадре присутствует персонаж в глянцевых или металлических доспехах.
По словам визуального супервайзера сериала «Мандалорец» Ричарда Блаффа, использование LED-объема (технологии Volume от Disney) позволило съемочной группе получить идеальные физические отражения на броне главного героя без необходимости полной замены его доспехов на компьютерную графику. Кинематографисты буквально «вырезают» кусок виртуального пространства и стыкуют его с реальными декорациями на полу (например, физическим песком или столом).
Виртуальные декорации значительно ускоряют и удешевляют производство. Ричард Блафф привел в пример экономику фантастических франшиз: если бы «Мандалорец» снимался по классической схеме, студии потребовалось бы построить от 15 до 25 масштабных физических декораций на съемочной площадке. Благодаря XR-технологиям в первом сезоне было создано всего три постоянные физические локации, а все остальные планеты и интерьеры загружались на экраны цифровым способом, позволяя мгновенно менять время суток и окружение.
Самой сложной технологической особенностью современных LED-объемов является мультиплатформенная съемка, позволяющая двум и более камерам снимать совершенно разные ракурсы и фоны на одном и том же экране одновременно. Технический процесс устроен следующим образом:
- LED-стена работает с повышенной частотой обновления, например, 120 кадров в секунду (FPS).
- Система чередует отображение фонов для разных камер через каждый кадр.
- Первая камера синхронизирована с четными кадрами (60 FPS), вторая — с нечетными (60 FPS).
- В результате две камеры, направленные в одну точку, видят абсолютно разные изображения (например, одна фиксирует зеленый фон для последующей графики, а другая — финальную синюю сцену).
Подобные системы способны масштабироваться минимум до шести камер одновременно, поднимая общую частоту обновления экрана выше 180 FPS. При этом зеркальные поверхности в кадре отражают для каждой камеры исключительно ее индивидуальный фон.
🤸 Живые маркеры: захват движений и этические дилеммы цифровых двойников 7:52
Второй протестированный инструмент — костюмы для оптического захвата движений (Motion Capture / Performance Capture), аналогичные тем, что использовались при создании фильмов «Аватар», «Планета обезьян» и «Властелин колец». Технология развертывания персональной анимации состоит из следующих этапов:
- Трекинг тела: На актера надевается специализированный костюм с независимыми светоотражающими маркерами (в конфигурации студии ZeroSpace использовалось 60 сфер-орбов). Расставленные по периметру камеры фиксируют перемещение каждого маркера.
- 3D-сканирование внешности: Актер помещается внутрь круговой фотограмметрической установки (системы камер в виде купола или когтя), которая создает точную трехмерную копию его лица и тела.
- Калибровка и маппинг: Программное обеспечение связывает скелетную анимацию, полученную от маркеров костюма, с цифровым аватаром, позволяя в реальном времени управлять любым 3D-персонажем.
Комментируя съемочный процесс фильма «Аватар: Путь воды», где актеры работали в костюмах захвата движений под водой, Маркес Браунли высказал мнение, что это продиктовано физикой движений. По его оценке, обычные трюки на подвесных тросах обеспечивают около 90% убедительности на экране, однако последние 10% реализма зависят от естественного сопротивления среды. Чтобы зафиксировать истинную биомеханику движений под водой, актерам необходимо физически находиться в водной среде.
Главный тренд технологии — ее стремительная демократизация. Клео Абрам подчеркнула, что если раньше подобные инструменты требовали бюджетов крупнейших киностудий, то сегодня базовый захват движений можно реализовать в домашних условиях с помощью одного смартфона iPhone. Потребительские технологии становятся все более доступными для индивидуальных авторов контента.
Развитие фотореалистичных цифровых двойников порождает серьезные юридические и этические дискуссии, которые Маркес Браунли и Клео Абрам назвали «серыми зонами» индустрии. В частности, собеседники обсудили следующие гипотетические и зарождающиеся сценарии:
- Пожизненное владение интеллектуальной собственностью (IP): Актеры смогут продавать права на использование своего оцифрованного лица и голоса, продолжая «сниматься» в фильмах после выхода на пенсию или даже после смерти.
- Замена исполнителей: Музыканты могут проходить процедуру сканирования, после чего профессиональные хореографы будут танцевать в костюмах моушн-капчура вместо них в музыкальных клипах. Маркес Браунли признался, что не видит в этом проблемы, проводя аналогию с традиционной работой каскадеров и дублеров.
- Цифровое омоложение: По мнению Клео Абрам, возможность использовать вечно молодого цифрового двойника (например, в возрасте 30 лет) может искусственно продлить карьеру, однако это не позволяет автору стареть естественным образом и создает внутренний психологический дискомфорт.
- Автоматизация создания контента: В будущем блогеры смогут полностью отказаться от живых съемок, просто загружая готовый текстовый скрипт в программу, которая заставит их цифрового двойника автоматически записывать видеоролики. Маркес Браунли выразил сомнение в этичности такого подхода, отметив, что при полной автоматизации теряется ощущение личного авторского труда.
🧊 Объемное видео: голограммы в реальном времени и будущее интерактивного контента 13:08
Третьим этапом демонстрации стала сцена объемного видеозахвата (Volumetric Video Capture). В отличие от традиционного захвата движений, эта технология не требует от человека надевать маркерные костюмы или проходить предварительное 3D-сканирование внешности.
Работа комплекса строится на синхронной записи пространства массивом из нескольких камер (в тестовом сценарии использовалось 6 камер), расположенных по кругу. Программные алгоритмы мгновенно «сшивают» плоские видеопотоки со всех ракурсов, формируя полноценную трехмерную голограмму человека в реальном времени. Итоговый ракурс, который видит зритель на мониторе, создается виртуальной камерой, способной перемещаться в любую точку сгенерированного 3D-пространства.
Маркес Браунли считает объемное видео логическим развитием интерактивного контента и формата видео 360°. В классических панорамных видеороликах зритель заперт внутри фиксированной сферы: он может оглядеться по сторонам, но не имеет возможности изменить точку обзора, заглянуть под объект или посмотреть на него сбоку. Технология Volumetric Video добавляет полноценное третье измерение, позволяя зрителю взаимодействовать с объектами (например, детально рассматривать демонстрируемые гаджеты с любого угла в виртуальном пространстве).
🚀 Новая эра видеотворчества: доступность технологий и новые смыслы 14:40
Технологический прогресс кардинально меняет экономику медиапроизводства. Клео Абрам напомнила, что еще 50 лет назад сама идея создания авторских видеороликов с помощью персональной цифровой камеры на собственном трансляционном канале была абсолютно немыслимой. По ее мнению, в ближайшие полвека создание контента станет еще более открытым для человеческого воображения.
Новые инструменты видеопроизводства позволяют авторам реализовывать сложные визуальные сюжеты, которые раньше требовали колоссальных бюджетов и огромного штата специалистов. Тем не менее, как заключили оба участника, конечная ценность видео зависит не от размера LED-экрана, количества датчиков или камер, а от качества и оригинальности историй, которые авторы хотят рассказать своей аудитории.
