Как захват движения усиливает реализм цифровых кукол в театральных постановках

Как захват движения трансформирует цифровую куклу на сцене

Театр всегда был пространством, где сходятся живые выступления и иллюзии. В последние годы интеграция технологии захвата движения открыла новые измерения для цифрового кукольного искусства, позволяя персонажам, которые существуют только в пикселях, двигаться, дышать и эмоть с сверхъестественным реализмом. Записывая тонкие жесты и выражения живых актеров, создатели театра теперь могут отображать человеческое выступление на цифровых куколах в реальном времени, создавая гибридные представления, которые размывают грань между физическим и виртуальным. Эта эволюция представляет собой не просто технический трюк; она представляет собой фундаментальный сдвиг в том, как истории рассказываются на сцене, предлагая зрителям опыт, который более захватывающий, эмоционально резонансный и визуально впечатляющий, чем когда-либо прежде.

Захват движения, часто называемый mo-cap, работает путем отслеживания движения актера через сеть камер, инерциальных датчиков или оптических маркеров. Затем захваченные данные переводятся в цифровой скелет, который управляет 3D-куклой. В театральной обстановке этот процесс должен происходить с минимальной задержкой, чтобы цифровой персонаж мгновенно реагировал на действия исполнителя. Результатом является цифровая марионетка, которая может смеяться, плакать, жест и двигаться с той же аутентичностью, что и ее человеческий аналог. Это техническое чудо принимается крупными театральными компаниями и независимыми труппами, доказывая, что цифровая кукольная игра больше не является нишевым экспериментом, а основным инструментом повествования.

Что такое захват движения и как он работает?

По своей сути захват движения — это процесс записи движения объектов или людей и перевода этих данных в цифровую модель. В кино и видеоиграх технология десятилетиями использовалась для создания реалистичных анимаций. Для театра требования разные: захват должен быть в реальном времени, настройка должна быть достаточно портативной для сценической среды, а цифровые марионетки должны убедительно взаимодействовать с живыми актерами и физическими наборами.

В театре сегодня используется несколько типов систем захвата движения. Оптический захват движения использует несколько камер, расположенных вокруг сцены, для отслеживания отражающих маркеров, прикрепленных к костюму актера. Эти камеры триангулируют позиции маркеров, предоставляя высокоточные данные. Инерциальный захват движения полагается на акселерометры и гироскопы внутри костюма, которые в меньшей степени подвержены воздействию освещения или препятствий на сцене. Третий метод, захват скелетного движения , использует камеры с датчиком глубины, аналогичные тем, которые используются в игровых консолях, чтобы захватывать движение всего тела без маркеров. Каждый подход имеет свои компромиссы между точностью, стоимостью и простотой настройки, но все стремятся обеспечить бесшовную связь между исполнителем и цифровым персонажем.

Помимо движения тела, захват движения лица стал необходимым для передачи эмоций. Актеры носят камеры с головкой, которые отслеживают микровыражения, или они используют специальный макияж с фидуциальными точками. Данные управляют лицом цифровой куклы, позволяя ей улыбаться, хмуриться или поднимать бровь с тем же нюансом, что и актер. В некоторых продвинутых постановках этот захват лица сочетается с распознаванием голоса, чтобы идеально синхронизировать движения губ, создавая иллюзию того, что цифровой персонаж действительно говорит и чувствует.

Усиление цифровых кукол в театре

Традиционное цифровое кукольное искусство требовало от аниматоров ручного создания каждого жеста, мигания и шага. Этот кропотливый процесс часто приводил к персонажам, которые чувствовали себя жесткими или роботизированными, независимо от того, насколько умелым был аниматор. Захват движения устраняет это творческое узкое место, позволяя собственному телу актера стать инструментом анимации. Цифровая кукла наследует естественное время исполнителя, сдвиги веса и эмоциональные отклонения, что приводит к уровню подлинности, которого ручная анимация изо всех сил пытается достичь.

В контексте живого театра исполнитель может быть скрыт за кулисами или в кабине, выступая в камеру или на небольшой сцене захвата движения. Альтернативно, актер может быть на сцене в костюме исполнения, видимом для аудитории как костюмированная фигура, в то время как цифровая марионетка проецируется на экран или прозрачный скрам. Эта двойственность создает захватывающие театральные возможности: аудитория может наблюдать как за человеческим актером, так и за их цифровым коллегой, оценивая искусство исполнения, наблюдая трансформацию. Такие постановки, как и (хотя и не чисто цифровой)] вдохновили волну цифрового кукольного искусства, которая в полной мере использует захват движения.

Технология также позволяет одному исполнителю управлять несколькими цифровыми марионетками одновременно. Присвояя разные части тела разным персонажам, или наслояя данные движения из разных дублей, один актер может оживить целый хор цифровых существ. Эта эффективность особенно ценна для независимых театральных компаний с ограниченными бюджетами, поскольку она уменьшает потребность в больших актерских составах, позволяя визуально сложное повествование.

Ключевые преимущества использования захвата движения для цифрового кукольного производства

• Аутентичный реализм:] Захват движения сохраняет микровыражения, паттерны дыхания и тонкий язык тела, которые делают человеческую производительность настолько привлекательной. Цифровые марионетки становятся сосудами для настоящих эмоций, а не только анимированных фигур.
• Скорость и эффективность: Вместо того, чтобы анимировать каждый кадр вручную, режиссёр может захватить живое исполнение и применить его непосредственно к марионетке.Это резко сокращает время производства и позволяет быстро итерировать и экспериментировать.
• Экспрессивный диапазон: Актер может заставить своего цифрового персонажа выполнять сложные физические подвиги — такие как полет, рост до гигантских размеров или преобразование формы — просто выставляя эти движения в студии захвата движения. Эта свобода открывает творческие возможности, которые чистая цифровая анимация найдет утомительными или невозможными.
• Беззвучная интеграция:] Когда цифровые марионетки двигаются и реагируют с тем же временем, что и живые актеры, мозг аудитории принимает их как часть той же реальности. Эта приостановка неверия является святым Граалем театра, и захват движения делает его гораздо более достижимым.
• Взаимодействие в реальном времени:] Передовые системы теперь позволяют цифровым куклам взаимодействовать с физическими объектами на сцене. Датчики в куколке могут обнаруживать столкновения и реагировать, позволяя цифровому персонажу подбирать реквизит, сидеть в кресле или даже касаться живого актера. Это двустороннее взаимодействие поднимает планку для погружения в театр.

Исторический контекст и ранние применения

Корни цифрового кукольного искусства в театре можно проследить до экспериментальных работ в 1990-х годах, когда художники начали использовать ранние системы захвата движения для управления виртуальными персонажами на сцене. Одним из первых заметных примеров было производство Танцы с виртуальным дервишем (1994) Майклом Чеклендом и Дэвидом Рокеби, которые использовали видеодатчики для управления проецируемой фигурой. Однако технология была грубой, часто страдала от задержки и ограничивалась черно-белыми каркасами.

Крупный прорыв произошел с развитием захвата производительности в реальном времени для фильма, особенно Weta Digital Питера Джексона для таких персонажей, как Голлум в Властелин колец (2002). В то время как это было для кино, основная технология вскоре просочилась в театр. В 2008 году Национальный театр Великобритании поставил постановку Франкенштейн , направленную Дэнни Бойлом, который использовал захват движения для создания цифрового двойника Существа во время определенных сцен.

На протяжении 2010-х годов усовершенствования вычислительной мощности, разрешения камеры и программных алгоритмов сделали захват движения более доступным. Такие производства, как группы Mimetic Encounter, использовали недорогие датчики Kinect, чтобы позволить зрителям управлять цифровыми марионетками своими телами.Cirque du Soleil’s Paramour Интегрировали захват движения для сюрреалистических воздушных последовательностей, которые сочетали живые акробаты с проецируемыми цифровыми персонажами. Каждое производство раздвигало границы, обучаясь связывать человеческую и цифровую производительность, не нарушая иллюзию.

Современные фильмы с использованием Motion Capture

The Tempest Королевской шекспировской компании (FLT:0) The Tempest (FLT:1) (2017)

Одним из самых известных примеров захвата движения в театре является постановка Королевской шекспировской компании «Буря» (FLT:0) режиссера Грегори Дорана. Персонаж Ариэля был изображен актером Марком Квартли, который выступал в костюме захвата движения на сцене. Его движения были визуализированы в реальном времени как мерцающий цифровой дух на большом экране над сценой. Эффект был захватывающим: Ариэль мог летать, разделяться на несколько копий и растворяться в свете, все это время Квартли выступал с заземленной, эмоционально тонкой работой. В постановке использовалась оптическая система захвата движения от Викона, с камерами, скрытыми в подделке театра, чтобы отслеживать отражающие маркеры на черном костюме Квартли. Эта интеграция живого актерского мастерства и цифрового артистизма получила широкое признание критиков и продемонстрировала потенциал мокапа для классического театра.

Подробнее об инновационном производстве РКК.

Punchdrunk's Горящий город (2022)

Погружающая театральная компания Punchdrunk известна своими обширными интерактивными постановками, где зрители бродят по тщательно спланированным наборам. В Горящий город , установленный в пост-апокалиптическом мире, вдохновленном падением Трои, компания представила цифровых марионеток, управляемых захватом движения. Исполнители в скрытых костюмах носили инерционные датчики, которые приводили в движение проекции призрачных фигур и мифических животных. По мере того, как участники аудитории перемещались по пространству, эти цифровые существа реагировали на них, создавая персонализированный опыт. В постановке подчеркивалось, как захват движения может использоваться не только для заранее запланированных последовательностей, но и для спонтанного взаимодействия, реагируя на близость аудитории и внимание.

Исследуйте захватывающий мир Сгоревшего Города.

Дисней Король Лев — Цифровая эволюция

В то время как оригинальное сценическое производство The Lion King опиралось на сложную кукольную игру и маски, более поздние туры и международные постановки экспериментировали с цифровыми улучшениями. В отдельных спектаклях актеры, играющие Муфасу и Шрама, использовали захват движения для управления цифровыми аватарами, которые появляются на массивных светодиодных экранах за сценой. Аватары выступают вместе с живыми актерами, добавляя слой величия к ключевым моментам, таким как «Круг жизни» или «Будьте готовы». Хотя это не полная цифровая марионетка, этот гибридный подход показывает, как установленные театральные бренды осторожно принимают мо-кап, чтобы сохранить свои шоу свежими и визуально потрясающими.

Узнайте о технологии, стоящей за Королем Льва на Бродвее.

Независимые и экспериментальные работы

Более мелкие компании также приняли захват движения. Австралийская группа Branch Nebula использовала безмаркерную систему для создания проецируемой цифровой куклы, которая взаимодействовала с живым танцором в их шоу En Pointe (2019). Цифровая кукла отражала движения танцора, но с небольшой задержкой, создавая сверхъестественный дуэт. В Великобритании, постановка театрального мастера Рэйчел Бэгшоу Разворачивание использовала iPad для управления цифровым аватаром в реальном времени, исследуя границы между человеком и машиной. Эти эксперименты, хотя и ниже по бюджету, подталкивают эстетические и концептуальные возможности цифровой куклы в театре.