10 различий между технологией XR и технологией виртуального производства

Технология XR лучше всего понимается как специфическое применение светодиодной технологии, целью которого является объединение реальных и виртуальных элементов в одной среде. Чаще всего сцена XR выглядит как “пещера” со светодиодными стенами, а иногда и полами и потолками вокруг звезды. Технология призвана сочетать наложения дополненной и смешанной реальности с цифровыми расширениями декораций, чтобы ведущие или исполнители могли взаимодействовать с изображениями в реальном времени. Для прямых трансляций, концертов и иммерсивных мероприятий, где и зрители, и камера должны видеть одно и то же изображение, XR является наилучшим решением.

Виртуальное производство, с другой стороны, — это более широкая область, включающая в себя несколько способов создания виртуальных сред. Виртуальное производство также включает в себя съемку на зеленом или синем экране, внутрикамерные визуальные эффекты с использованием светодиодных экранов, симуляционные съемки и процессы от предварительной до постобработки, где движки реального времени обрабатывают все этапы — от предварительной визуализации до монтажа. XR — это лишь одна часть виртуального производства. Это специализированная и мощная технология, но она не является исчерпывающей.

Различие 1: Область применения и назначение системы.

XR лучше всего понимать как специфическое применение светодиодных технологий, объединяющее реальные и виртуальные объекты в одной среде. Чаще всего сцена XR выглядит как “пещера” со светодиодными стенами, а иногда и полами и потолками вокруг звезды. Технология призвана сочетать наложения дополненной и смешанной реальности с цифровыми расширениями декораций, чтобы докладчики или исполнители могли взаимодействовать с изображениями в реальном времени. Для прямых трансляций, концертов и иммерсивных мероприятий, где и зрители, и камера должны видеть одно и то же изображение, XR является наилучшим решением.

Виртуальное производство, с другой стороны, — это более широкая область, включающая в себя несколько способов создания виртуальных сред. Помимо светодиодных пещер, виртуальное производство включает в себя съемки на зеленом или синем экране, внутрикамерные визуальные эффекты со светодиодными стенами, симуляционные съемки и процессы, охватывающие все этапы от предпроизводства до постпроизводства, где движки реального времени контролируют все — от предварительной визуализации до монтажа. Короче говоря, XR — это лишь одна часть виртуального производства. Это специализированная и мощная технология, но она не является полной картиной.

Отличие 2: Геометрия светодиодной сцены и подотчётность пикселей.

Одна из лучших особенностей XR — это то, насколько точно она планирует геометрию сцены. Прямые углы, шестиугольные узоры или полностью закрытые светодиодные объемы — распространенные элементы на сценах. Эти формы не только эстетичны; они также помогают с точным отображением пикселей, уменьшают проблемы с перекрытием и создают четкие линии, где могут начинаться цифровые расширения за пределами экрана. Для XR важен каждый пиксель, потому что и люди в комнате, и камеры на съемочной площадке смотрят на изображения на множестве поверхностей.

В виброэффектах, особенно в условиях внутрикамерной визуализации (ICVFX), обычно думают о следующем: светодиодная стена В качестве основного фона можно использовать стену, а не полностью отгороженную стеной комнату. Изогнутые или плоские дуги допустимы, поскольку цель состоит в том, чтобы придать камере глубину и параллакс. Поскольку в комнате обычно нет людей, геометрия может быть проще, и стену можно использовать в качестве фона, вместо того чтобы беспокоиться обо всех углах.

Отличие 3: Использование светодиодных напольных и потолочных панелей.

Для создания эффекта полного погружения на 360° в конструкциях XR обычно используются светодиодные полы и потолки. Полы играют очень важную роль, поскольку они обеспечивают как зрителям в прямом эфире, так и камерам ощущение истинной глубины, отображая правильные отражения и отслеживая параллакс при перемещении объекта в помещении. При использовании потолков, они делают изображение более реалистичным, добавляя верхнее освещение и отражения, которые дополняют окружающее пространство стен. Вся эта конструкция помогает в XR создать ощущение, что вы находитесь ’внутри“ виртуальной среды.

В отличие от этого, в съемочных площадках для видеосъемки обычно используются только светодиодные поверхности в качестве стен, которые могут быть изогнутыми или панорамными и служить основным фоном. В большинстве случаев используются настоящие полы, реквизит и обычное верхнее освещение. Однако, если для кадра необходимы светодиодные отражения или выразительные визуальные эффекты сверху, используются они. Аргумент практичен: большие светодиодные потолки и полы увеличивают вес, сложность и стоимость, но они могут не иметь большого значения, если камера видит только стены и действие на переднем плане.

Разница 4: Наложение графики в реальном времени против конечных пикселей, полученных непосредственно в камере.

XR-сцены предназначены для отображения графики на светодиодных экранах и наложениях в реальном времени, поэтому и камеры, и зрители видят одно и то же. Это делает XR идеальным решением для прямых трансляций, киберспорта и корпоративных мероприятий, где очень важно, чтобы происходящее на сцене и на экране были синхронизированы. Наложения — это не просто фоны; это могут быть логотипы, диаграммы или движущиеся элементы дополненной реальности, которые появляются в светодиодном пространстве в реальном времени.

Цель рабочих процессов VP, ориентированных на ICVFX, иная: захват финальных пикселей непосредственно в камере. Вместо добавления графики в выходной поток, контент добавляется в сцену по мере съемки. Управление осуществляется механизмами реального времени. светодиодная стена Чтобы показать реалистичный фон, который корректно движется с учетом параллакса камеры, кинематографисты получают практически готовые кадры еще до того, как покинут съемочную площадку, за счет сокращения работы над композитингом на более поздних этапах.

Отличие 5: Сложность отслеживания и акцент на калибровке.

Для работы XR-технологий требуется значительная настройка на разных поверхностях. Чтобы данные отслеживания камеры работали корректно, стены, полы и наложения дополненной реальности должны находиться в правильном месте. Это означает, что пространственные привязки и калибровка линз должны быть очень точными. Небольшое смещение может нарушить эффект погружения, поскольку зрители и участники находятся в одном помещении и сразу заметят различия.

Отслеживание VP по-прежнему важно, но обычно это не так сложно. Когда камера движется, для большинства операций ICVFX наиболее важно убедиться, что параллакс и перспектива фонового окружения остаются неизменными. Поскольку поверхностей, с которыми нужно работать, меньше, калибровка проще, чем в XR, где каждая светодиодная поверхность активна и должна работать со слоями дополненной реальности.

Отличие 6: Философия дизайна контента

В VP (Virtual Plane) светодиодная стена обычно используется в качестве фона. Камера снимает актеров и реквизит на фоне стены. Восприятие глубины зависит от того, насколько хорошо люди могут сфокусироваться на фоне; если он выглядит достаточно реалистично, люди поверят в него. Этот метод фокусируется на фотореализме в кинопроизводстве и делает менее необходимым использование полностью интерактивного окружения.

С другой стороны, сцены XR созданы для работы в качестве объемных декораций. Графика предназначена как для физического, так и для цифрового присутствия, а артисты двигаются и взаимодействуют в пространстве, определяемом светодиодами. Светодиодный объем — это больше, чем просто фон; он становится активным элементом мира истории, часто с добавлением графики дополненной реальности и расширений для живых выступлений. Это различие в философии дизайна лежит в основе многих технологических и художественных решений, которые отличают XR от VP.

Разница 7: Согласование прямой трансляции и события.

Технология XR естественным образом связана с ситуациями, когда присутствует живая аудитория. То, что вы видите на светодиодных экранах, должно соответствовать тому, что демонстрируется в эфире или на площадке во время концертов, корпоративных мероприятий и трансляций. Эта двойная задача — обслуживание как видеопотока с камер, так и живой аудитории — влияет на разработку конвейеров XR. Технология уделяет большое внимание синхронизации, чтобы докладчики, исполнители и зрители одновременно находились в одной и той же дополненной среде.

Виртуальное производство может также работать в режиме реального времени, но в основном оно предназначено для создания фильмов и телешоу. Главная цель здесь — получить видеоматериал, который будет выглядеть завершенным или близким к завершенному на этапе постпродакшена. В этом случае “зрителями” являются люди, смотрящие фильм дома или в кинотеатре, а не люди в студии. Поэтому рабочие процессы виртуального производства, как правило, ориентированы на кинематографическую отполированность, а не на синхронизацию с прямыми трансляциями.

Отличие 8: Выбор светодиодов и допуски при проектировании.

Сцены для XR-проектов обычно имеют более одной светодиодной поверхности, например, стены, пол, а иногда и потолок. Это означает, что Шаг пикселей, Частота обновления, цветопередача и яркость должны быть одинаковыми на всех панелях. Более жесткие допуски уменьшают муар, позволяют камерам снимать с низких углов и обеспечивают стабильное изображение независимо от того, куда направлена камера. Инженерная точность крайне важна, поскольку изображение видят как камера, так и люди, находящиеся рядом.

При настройке видеостены для ICVFX инженеры принимают решения, исходя из направления съемки. Светодиодные стены хорошо работают на определенных расстояниях и углах съемки, но не так эффективны на полу или потолке. Это позволяет производителям видеостен вкладывать значительные средства в оптимизацию параллакса и экспозиции основной стены, не проектируя при этом слишком сложные поверхности, которые камера видит нечасто.

Различие 9: Акцент на рабочем процессе (предварительная визуализация против коррекции на этапе постобработки)

В рабочих процессах XR много работы на начальном этапе. Предварительная визуализация и разработка внешнего вида в реальном времени очень важны, потому что многие вещи, такие как графика дополненной реальности и расширения декораций, должны идеально совпадать и не могут быть исправлены позже. Идея состоит в том, чтобы “исправить на этапе подготовки”, то есть убедиться, что все работает хорошо до начала съемок или запуска шоу.

В VP также значительная часть работы перенесена на передний план, хотя баланс отличается от традиционных VFX. VFX, снятые непосредственно во время съёмки, сокращают необходимость в постобработке, но команды VP всё же могут вносить небольшие изменения или корректировки после съёмки. Этот подход направлен на то, чтобы максимально использовать возможности съёмки непосредственно во время съёмки, но также подразумевает, что некоторые изменения могут быть внесены на этапе постобработки, если ситуация слишком сложная.

Различие 10: Терминология и использование термина «зонтичный».

Наиболее очевидный способ определить разницу — это то, как сама индустрия использует эти термины. Большинство людей согласны с тем, что виртуальное производство — это основная область, включающая светодиодные объемы, движки рендеринга в реальном времени, отслеживание камеры, визуализацию и конвейеры для работы с зеленым/синим экраном. XR — это специфический метод, который подпадает под эту категорию. Он в основном включает в себя светодиодные “пещеры”, которые сочетают в себе наложения дополненной/смешанной реальности и цифровые расширения декораций в реальных условиях.

Когда команды используют XR и VP как синонимы, они могут упустить важные этапы планирования. Если для кинопроекта нужна всего лишь главная стена, подход XR может оказаться слишком сложным. С другой стороны, если речь идёт о прямой трансляции событие Для корректного отображения нескольких поверхностей и выравнивания AR конвейер VP может оказаться недостаточным. Знание того, что XR является частью VP, помогает контролировать объем работ, бюджет и инженерные допуски.

Часто задаваемые вопросы

XR — это то же самое, что и виртуальное производство?

Нет. VP — это более обширная область, включающая ICVFX на светодиодных экранах, зелёных/синих экранах и Simulcam. XR — это более специфический метод, использующий светодиодные “пещеры” и наложения AR/MR в студии.

Почему на сценах XR часто используются светодиодные полы?

Полы делают погружение в виртуальный мир более захватывающим, улавливают отражения и позволяют отслеживать параллакс под ногами, что облегчает взаимодействие докладчиков и камер с виртуальным миром.

Можно ли проводить видеосъемку без светодиодных экранов?

Да. VP включает в себя не только светодиодные объемы, но и хромакей, симуляцию и визуализацию в реальном времени.

Отличаются ли характеристики светодиодов у моделей XR и VP?

В большинстве случаев, конечно. Использование XR на различных поверхностях требует постоянного шага, высокой частоты обновления/сканирования и более строгой калибровки на стенах и полах. VP также может оптимизировать фоновую стену для рабочей зоны камеры.

Почему на некоторых сценах для видеопроката избегают использования светодиодных потолков?

В ICVFX стена используется в качестве фона; потолки добавляют веса, мощности и сложности в управлении без пропорционального усиления на камере, пока не потребуется верхнее освещение или отражения.

Как геометрия сцены влияет на перекрытие объектов и расширение декораций?

XR-технологии предпочитают использовать прямоугольные или шестиугольные “пещеры” для управления границами пикселей, чтобы расширения AR или декораций случайно не заменяли реквизит или актеров. Фоновые изображения VP могут обрабатывать более простые кривые и плоские поверхности.

В каких случаях XR-технология лучше классического зелёного экрана?

Технология XR устраняет эффект кеинга, обеспечивает естественное светодиодное освещение и отражения, а также позволяет демонстрировать графику живой аудитории. Однако с ней нужно обращаться осторожно, чтобы избежать проблем, связанных с муаром, изменением высоты тона и задержкой.

Для работы обоих проектов требуется Unreal Engine или аналогичный движок?

Да, обычно. Оба используют рендеринг в реальном времени (как Unreal и Viz), отслеживание объектива и камеры, а также медиасерверы для синхронизации всего процесса.

XR в основном предназначен для прямых трансляций?

Технология XR отлично подходит для мероприятий и трансляций, поскольку наложения на экран предназначены как для тех, кто находится в кадре, так и для тех, кто присутствует лично. При правильном подходе её также можно использовать в кино.

Всегда ли XR сложнее, чем VP?

Многоповерхностная калибровка и наложение дополненной реальности в XR обычно усложняют интеграцию по сравнению с однослойным фоном ICVFX, но не всегда.

Заключение

Проще всего отличить XR от VP, представив его как многоповерхностный подход к светодиодной и AR/MR-визуализации, ориентированный на интерактивность и видимость в реальном времени, а VP — как общую область, включающую ICVFX, хромакей и визуализацию в реальном времени. Для команд, работающих со светодиодами, выбор между XR и VP сводится к геометрии, количеству задействованных поверхностей, требованиям к отслеживанию и наложению, а также к тому, должен ли результат работать как для живой аудитории, так и для камеры.