Творческое сотрудничество оператора с художником-постановщиком и арт-департаментом критически важно для успешного производства любого типа. Они консультируются друг с другом по декорациям, цветам, текстурам, встроенному практическому свету и так далее.
В виртуальном продакшене — а точнее, в проектах с использованием in-camera visual effects (ICVFX), то есть LED-экранов — существует гибрид традиционного (физического) художественного департамента и виртуального художественного департамента (VAD).
Сотрудники традиционного департамента занимаются традиционными декорациями, которые нужны на каждой площадке, а команда VAD отвечает за элементы декораций и фонов, которые отображаются на LED-экранах в виртуальном пространстве.
Виртуальный мир требует не меньше художественного дизайна, художественного руководства, декораций, реквизита, строительства, покраски и текстурирования, чем традиционный. Эти элементы должны точно совпадать с работой традиционного департамента по масштабу, цвету, текстуре и объему.
Когда оператор, традиционный художественный департамент и VAD работают как единое целое, их совместная работа создает реальный мир на традиционной сцене, который бесшовно сливается с виртуальным миром на LED-экране — так, что зритель не сможет отличить одно от другого.
Акцент на подготовку
В традиционной композитной съемке с использованием синего или зеленого экранов виртуальные элементы создаются художниками постпродакшна уже после съемок. Это означает, что оператору на площадке приходится угадывать, как правильно выставить свет и кадрировать объекты, чтобы они совпали с тем, что появится позже.
В ICVFX и виртуальном продакшене всё наоборот: все виртуальные элементы создаются до съемок, чтобы быть доступными на площадке и сниматься одновременно с реальными элементами (включая актеров). Цель — получить финальный композит прямо в камере, в реальном времени.
Это дает значительные преимущества: во-первых, исчезает фактор угадывания с синим или зеленым экраном, оператор и режиссер получают гораздо больший и непосредственный контроль над картинкой прямо на площадке. Но это требует гораздо большего объема работы на этапе подготовки — и, в идеале, меньшего объема на постпродакшне.
Подготовка включает не только создание цифровых активов, но и физических. Традиционный художественный департамент должен задолго до съемок изготовить уникальные элементы декораций, реквизит и оформление — потому что эти физические предметы нужно спроектировать, утвердить и построить заранее, чтобы их можно было отсканировать и воспроизвести в виртуальном мире.
Это ключевой шаг, который позволяет виртуальному реквизиту и оформлению соответствовать реальным предметам, делая переход между ними незаметным для зрителя.
Это также означает, что производство должно нанимать команды реквизиторов, строителей и оформителей гораздо раньше, чем обычно. Это требует постоянной связи между виртуальным и физическим художественными департаментами — ведь срочные покупки реквизита или элементов оформления в последний момент могут создать серьезные проблемы для виртуального отдела. И наоборот, виртуальные художники не могут просто вставлять в сцену готовые стандартные предметы (мебель, светильники), если этим предметам требуется физический аналог на площадке.
Такой рабочий процесс также диктует, что решения, влияющие на операторскую работу — включая практическое освещение, расположение и размер окон, направление и интенсивность солнечного света и т. д. — должны приниматься очень рано на этапе подготовки.
Майкл Гои, ASC, ISC, который был оператором-постановщиком, исполнительным продюсером и режиссером на Netflix-сериале Avatar: The Last Airbender, рассказал:
«С ростом применения виртуального продакшна критически важно, чтобы оператор подключался к подготовительному процессу раньше, чем его обычно нанимают для традиционной подготовки.
Идеально, если оператор, который будет снимать фильм, также участвует в съемке или проектировании активов, которые будут использоваться на LED-экране. Это позволяет правильно разместить солнце или другой основной источник света так, чтобы освещение LED-объема помогло создать нужное настроение и эффективно поддерживало процесс.
Даже виртуальные активы, которые были отсняты, а не смоделированы, требуют, чтобы оператор скорректировал цвет и контраст перед загрузкой их в объем. Поэтому график работы оператора должен предусматривать непоследовательную подготовку, чтобы он мог внести свой вклад в фундамент визуального подхода проекта».
Защита производства
Кристофер Пробст, ASC, снял более 20 проектов с ICVFX и провел семинар по виртуальному продакшну на курсе ASC Master Class. Он — директор по инновациям и совладелец Synapse Virtual Production в Лос-Анджелесе, где есть собственная сцена с LED-ICVFX и консалтинг для других LED-студий. Вот что он отметил:
«При съемке на реальной локации оператор обычно изучает место, выбирает лучшее время суток, углы съемки и оценивает существующие источники практического света — все это по-прежнему актуально и для виртуального продакшна. Часто режиссер и оператор проводят несколько сессий с командой VAD и могут виртуально разведать 3D-окружения, которые создаются. Идеально, если оператор может сразу внести правки по углам съемки и виртуальному освещению сцены — чтобы все это органично сочеталось с освещением физической площадки.
Например, можно попросить добавить окно с одной стороны декорации, если знаешь, что персонаж будет сидеть за столом, и с этим окном за спиной получишь холодный дневной свет с одной стороны и сможешь добавить виртуальный бра с теплым светом на противоположной стене, создав цветовой контраст, который легко поддержать на площадке настоящим светом. Как оператор, я знаю, где лучше разместить окно и на какой высоте повесить бра — потому что знаю планируемые кадры.
Когда я готовлю или консультирую виртуальный проект, моя задача как оператора — помочь избежать возможных проблем и защитить производство. Например, Unreal Engine обладает огромными возможностями создавать детализированные и фотореалистичные миры, но трассировка лучей и рендеринг должны выполняться в реальном времени с нужной частотой кадров. Смотреть окружение на компьютере VAD — это одно, а на большом LED-экране — совсем другое. Если внутри VAD сцена идет с 24 кадров в секунду, то на стене может быть всего 10 fps. Поэтому я прошу художников оптимизировать сцены так, чтобы производительность была как минимум вдвое выше нужной частоты кадров. Если мы снимаем 48 fps, я хочу, чтобы сцена тянула 96 fps — чтобы на съемке все работало стабильно.
Не обязательно оператору уметь оптимизировать VP-активы в Unreal Engine, но я знаю, что бра с лампочкой на 25 ватт не даст заметного света на 15 метрах. А в виртуальной среде Unreal этого не знает — и будет рассчитывать лучи от виртуальной лампочки на сотни метров, если не сказать ему остановиться. Художники должны знать, как ограничить светильники, чтобы не перегружать движок трассировкой лучей и ускорить сцену. Но и оператору не помешает понимать, как виртуальный свет влияет на производительность сцены.
В идеальном рабочем процессе оператор еще на этапе подготовки сотрудничает с художниками, вносит свои правки и вкус в освещение сцен и заранее решает потенциальные проблемы. На практике же часто операторы Unreal Engine на площадке — это не те художники, которые делали актив, поэтому им приходится на ходу разбираться, как он устроен и как его починить.
Виртуальный продакшн — это революционная технология. Когда все работает правильно — это потрясающе: ты видишь, как операторское мастерство творит магию с тем, что по сути является большим телевизором за спиной актера. Это, конечно, упрощенное объяснение, но главный смысл в том, что при этом подходе оператор снова становится настоящим автором изображения — решает, насколько оно светлое или темное, теплое или холодное, сколько атмосферы в кадре. Ты видишь все прямо в камере, а не узнаешь результат через три месяца от VFX-художников».
Ранняя и содержательная работа
Оператору полезно заранее разобраться в инструментах виртуального продакшна — чтобы лучше оптимизировать изображение с помощью виртуального света и текстур и предугадывать возможные проблемы еще до старта съемок. Поэтому проекты с ICVFX должны обеспечивать оператору реальную и раннюю возможность влиять на ключевые решения, чтобы съемочный процесс прошел максимально гладко.
