Компания Magnopus подробно описывает свои подходы к виртуальному продакшену в Fallout, которые включали в себя съемку сцен с LED-стенами на 35-миллиметровую пленку.
Постапокалиптический сериал «Fallout» был снят на 35-миллиметровую плёнку с использованием анаморфотных объективов. Хотя этот формат хорошо знаком исполнительным продюсерам шоу Джонатану (Джоне) Нолану и Лизе Джой, которые использовали такой же подход в «Мира Дикого Запада», он не так часто встречается в эпизодических проектах, которые также в значительной степени полагаются на съёмку на LED-экране.
Чтобы добиться этого, потребовалось тесное сотрудничество с Magnopus, студией, которая участвовала в предыдущих исследованиях и разработках «Мира Дикого Запада», а также некоторых съемках (на пленку) на LED-экране для четвертого сезона этого сериала.
«В четвертом сезоне «Мира Дикого Запада» действительно началась эволюция этой технологии, интегрированной в повествование», — рассказывает Эй Джей Скиутто, директор по виртуальному продакшену в Magnopus.
Скиутто руководил работой в Magnopus по предоставлению и совместному использованию нескольких виртуальных производственных услуг для Fallout, включая отдел виртуального дизайна, работу с LED и внутрикамерные визуальные эффекты (ICVFX). Подробнее о том, как в процессе съемок использовалась кинопленка, рассказывается ниже, но процесс начался со строительства павильона в Нью-Йорке, где проходили съемки сериала.
«В то время, — говорит Скиутто, — в Нью-Йорке не было LED-зала, в котором можно было бы провести шоу такого масштаба. Но в итоге был спроектирован LED-зал на Лонг-Айленде в Gold Coast Studios, который соответствовал всем требованиям. Дизайн зала был выполнен в форме подковы. Он не был цилиндрическим, а в форме подковы, чтобы мы могли ходить и разговаривать по большому длинному и плоскому участку. Итоговая LED-стена была 75 футов в ширину, 21 фут в высоту и почти 100 футов в длину».

«В то время мы использовали самые последние и лучшие версии Unreal», — утверждает Скиутто. — Для первых двух эпизодов сезона мы использовали Unreal 4.27, а затем сделали перерыв на несколько месяцев между первыми четырьмя эпизодами и последними четырьмя, и в этот момент Unreal обновился до версии 5.1, и у нее были некоторые преимущества. Одним из них был Lumen — система глобального освещения в реальном времени, которая, как мы выяснили, была очень важна для декораций, с которыми мы работали. Итак, мы обновили движок до версии Unreal 5.1 примерно за неделю до того, как начали снимать сцены с его использованием, что может вызвать удивление у любого, кто раньше работал в этой индустрии. Epic говорит, что мы, вероятно, были первым крупным продакшеном, которое на практике использовало 5.1, и в итоге это отлично сработало для нас».
Как заставить это работать для фильма?
После установки LED-стены и начала работы отдела виртуального искусства Magnopus по-прежнему требовалось решить любые проблемы, возникающие при съёмке 35-миллиметровой плёнки на объёмной сцене. Скиутто отмечает, что синхронизация была самым важным фактором.
«Вы должны иметь возможность синхронизировать камеру, чтобы она обновлялась вместе со светодиодами. Мы работали с Keslow Camera ещё на «Мире Дикого Запада», чтобы получить синхронизирующие блоки, предназначенные для Arricam LT и Arricam ST, которые считывают сигнал генлок и позволяют фазировать камеру. На разработку сигнала генлок, который считывается камерой и позволяет ей фазироваться, ушло пару месяцев».

«После того, как мы провели пару тестов с камерой, — продолжает Скиутто, — мы почувствовали, что находимся в хорошем состоянии, но затем нам пришлось провести несколько тестов с клиньями, потому что фактическая задержка между Unreal, узлами рендеринга, процессорами Brompton и экраном была немного динамичной. Нам пришлось провести несколько тестов с клиньями, чтобы выяснить, в чём заключается эта задержка, чтобы затем настроить камеру».
Следующим препятствием стал цветовой рабочий процесс. «Обычно, — говорит Скиутто, — вы создаете цветовой профиль для своей камеры, но из-за того, что HD-разъем на пленочной камере на самом деле не является HD-разъемом, вы действуете наобум. Ну, на самом деле вы не действуете наобум. За этим стоит много научных исследований в отношении того, что вы видите в ежедневных съемках, как вы настраиваете камеру и как вы настраиваете цифровую камеру. Вы не можете на 100 процентов доверять тому, что видите на экране HD-телевизора. Поэтому у нас был Sony Venice, который стоял на штативе рядом с кинокамерой. Мы применили к цифровой камере LUT, которая имитировала нашу кинокамеру, чтобы мы могли в реальном времени корректировать цветопередачу общего изображения стены».
Скиутто добавляет, что еще одной проблемой было понимание природы различных результатов, получаемых в фотолаборатории, с точки зрения ежедневных съемок.
Этот процесс съемок, при котором отснятый материал отправляли из Нью-Йорка в Бербанк для проявки и оцифровки, также повлиял на предварительную съемку на LED-стене, как объясняет Скиутто.
«Когда вы делаете предварительную съемку на кинокамеру, вы не знаете, что получилось, пока не пройдет полтора дня. Поэтому мы совершали серию предварительных съемок, когда мы снимали в течение дня, проявляли пленку, а на следующий день просматривали и вносили изменения в контент, прежде чем снимать еще один день предварительной съемки. Это позволило нам составить график, который давал декораторам возможность вносить изменения в декорации, а нашему отделу виртуального искусства — вносить изменения в освещение виртуального контента, чтобы он соответствовал физическому контенту и был готов к любым настройкам освещения и цвета, которые нам понадобятся в день съемок».
Отвечая на вопрос о том, как в итоге выглядели отснятые на LED-стену кадры, Скиутто упоминает, что «при просмотре готовых результатов в ежедневных выпусках было заметно более плавное затухание между актерами на переднем плане, декорациями на среднем плане и виртуальным контентом на заднем плане. Этот переход был немного более плавным из-за зернистости пленки (по сравнению с цифровым форматом), и это очень помогло. Кроме того, на пленке можно запечатлеть гораздо больше деталей и оттенков, что позволяет более динамично смещать цвета при постобработке, чем на цифровом формате. Если вы снимаете на цифровую камеру, а затем нажимаете на кнопку или слишком сильно крутите ее, это может быстро привести к «странным» результатам. Поэтому съемка на пленку, по крайней мере, позволила нам использовать более широкий диапазон во время постпродакшена».