Table of Contents

Эволюция неигровых персонажей через захват движения

Технология захвата движения коренным образом изменила то, как разработчики видеоигр создают неигровых персонажей (NPC). Записывая точные движения человеческих актеров и отображая их на цифровые аватары, студии теперь могут создавать NPC, которые перемещаются, реагируют и взаимодействуют с уровнем реализма, ранее зарезервированным для кинематографических предварительно отрендерированных сцен. Этот переход от ручной анимации на мейнфрейм к захвату движения, управляемому производительностью, не только повысил визуальную точность, но и углубил погружение игрока, поскольку каждый праздный сдвиг веса, нервный взгляд или тонкий жест руки чувствует себя аутентичным. Результатом является поколение игр, где NPC больше не чувствуют себя как скриптовые автоматы, а скорее как правдоподобные жители своих цифровых миров.

Что такое захват движения?

Захват движения (часто сокращается до mo-cap) — это процесс записи движения объектов или людей. В контексте видеоигр обычно включает в себя актёра, носящего костюм, снабженный отражающими маркерами или инерциальными датчиками. Множественные высокоскоростные камеры отслеживают эти маркеры, а специализированное программное обеспечение триангулирует положение каждого маркера в 3D-пространстве, создавая цифровой скелет, который движется точно так же, как актёр. Эти данные затем применяются к 3D-модели персонажа, которая наследует естественное, текучее движение исполнителя.

Существует три основных типа захвата движения, используемых в разработке игр:

  • Оптический захват движения использует несколько инфракрасных камер для отслеживания отражающих маркеров, прикрепленных к актёру. Эта система очень точна и является золотым стандартом для производства AAA, но требует контролируемой студийной среды и значительного времени постобработки.
  • Захват инерциального движения опирается на встроенные в костюм гироскопы, акселерометры и магнитометры. Никаких внешних камер не требуется, что позволяет захватывать в любом физическом пространстве. Хотя он менее точен, чем оптические системы, он предлагает портативность и более быструю настройку и используется в инди-проектах и VR-опытах.
  • Безмаркерный захват движения использует алгоритмы компьютерного зрения для отслеживания движений актёра с видеоматериалов без необходимости использования маркеров или специальных костюмов. Эта технология всё ещё развивается, но обещает снизить барьер для входа для небольших команд и включить захваты на месте.

Для более глубокого технического обзора того, как работают эти системы, см. полный разбивка на Википедия захват движения статья .

Преимущества захвата движения для разработки NPC

Непревзойденный реализм через естественное движение

Наиболее очевидным преимуществом захвата движения является реалистичное качество, которое он дает анимациям NPC. Человеческие актеры приносят бессознательные микродвижения - то, как рука чистит волосы за ухом, небольшое изменение положения при нервозности, естественный ритм дыхания - которые невероятно трудно запрограммировать вручную. При применении к NPC эти тонкие сигналы заставляют персонажей чувствовать себя присутствующими и живыми. Исследования в восприятии игроков показали, что даже небольшие улучшения в анимационном реализме значительно повышают чувство погружения и эмоционального взаимодействия с сюжетными NPC.

Производственная эффективность и скорость итерации

Традиционные ручные анимированные брелоки требуют от аниматоров кропотливого позиционирования каждого сустава для каждого кадра. Один односекундный цикл ходьбы может занять несколько дней настройки. При захвате движения короткое исполнение может быть записано за считанные минуты, обеспечивая необработанный набор данных, который художники могут затем очистить, переработать и смешать. Эта эффективность позволяет командам разработчиков быстро повторять поведение персонажей - записывать несколько дублей сцены разговора до тех пор, пока эмоциональный тон не станет идеальным, а не тратить недели на реанимацию каждой линии диалога.

Последовательное исполнение персонажей через сцены

В сюжетно-тяжелых играх NPC часто появляется в течение нескольких часов геймплея. Захват движения гарантирует, что поза персонажа, стиль жестов и скорость движения остаются последовательными от одной сцены к другой. Эта согласованность жизненно важна для поддержания правдоподобности. Когда охранник идет с одинаковой походкой как в прологе, так и в последнем акте, игроки подсознательно регистрируют это как согласованный человек - качество, которое исключительно трудно достичь с чисто ручными анимированными последовательностями.

Экспрессивный диапазон и эмоциональная глубина

Захват движения лица (часто называемый захватом производительности в сочетании с телом и голосом) подтолкнул эмоциональную выразительность NPCs к новым высотам. Актеры носят шлемы с камерами, которые отслеживают каждую борозду бровей, локон губ и поднятие щеки. Эти тонкие анимации лица, когда нанесены на цифровые персонажи, позволяют NPC передавать радость, гнев, подозрение или печаль без единой линии диалога. Такие игры, как Hellblade: Senua's Sacrifice, в значительной степени полагаются на захваты лица, чтобы изобразить психологическое состояние главного героя, и те же методы теперь применяются к поддерживающим персонажам, заставляя взаимодействия чувствовать себя по-настоящему человеческими.

Влияние на трубопроводы разработки игр

Интеграция с системами нарративного дизайна и диалога

Захват движения больше не является запоздалой мыслью — это основной компонент конвейера дизайна. Раскадровки и чтения сценариев теперь часто включают блокировку физических выступлений до того, как будет написана одна строка кода. Режиссеры работают с актерами на сцене мокапа так же, как и на съемочной площадке, гарантируя, что язык тела и эмоциональные удары совпадают с дугой истории. Этот сдвиг размыл линии между разработкой игры и производством фильма, что привело к тому, что многие называют «кинематографической эрой игры».

Тематические исследования: The Last of Us Part II и Cyberpunk 2077

Часть II The Last of Us часто цитируется как вершина захвата производительности. Naughty Dog записывал сотни часов данных о лице и теле для каждого NPC, от главных антагонистов до случайных выживших. Результатом является мир, где каждый персонаж — даже те, кто встречался только кратко — обладает уникальной физической силой, которая усиливает их личность. Нервный торговец ерзает со своим пальто; измученный солдат падает на стену. Эти детали не были одушевлены вручную, но захвачены непосредственно от актеров.

CD Projekt Red's Cyberpunk 2077 использовал захват движения для анимации своей огромной популяции NPC, начиная от квестов и заканчивая процедурно генерируемыми толпами. Система «осознания тела от первого лица» требовала, чтобы игроки видели, как руки, руки и тело главного героя реагируют естественным образом во время взаимодействий. Данные захвата движения были смешаны с процедурными системами для создания сотен уникальных пустых анимаций, гарантируя, что два NPC, стоящие на углу улицы, никогда не двигаются одинаково. Подробный посмертный процесс мокапа в Cyberpunk 2077 можно найти в Технический анализ Eurogamer.

Роль захвата движения в открытых мирах

Игры с открытым миром сталкиваются с особой проблемой: они должны заполнять огромные среды интерактивными NPC при сохранении бюджетов производительности. Захват движения обеспечивает библиотеку многоразовых анимационных клипов - жестов приветствия, боевых позиций, анимации реакции - которые могут быть вызваны игровой логикой. Студии часто захватывают «словарь движения» для каждой фракции NPC. Солдаты из одной фракции стоят с жесткой, парадной позе; гражданские лица принимают расслабленные, асимметричные позиции. Эта дифференциация, основанная на данных, заставляет мир чувствовать себя ручной работой, даже когда активы повторно используются, техника, прекрасно проиллюстрированная в Red Dead Redemption 2 , где каждый названный персонаж имеет уникальную подпись движения, полученную из сеансов мокапа с актерами.

Проблемы и ограничения

Высокая стоимость и специализированное оборудование

Профессиональные студии оптической мокапы взимают десятки тысяч долларов в день аренды, а костюмы, камеры и программное обеспечение представляют собой значительные первоначальные инвестиции. Меньшие студии часто не могут позволить себе выделенные средства мокапа и либо полагаются на инерциальные костюмы, либо на аутсорсинг для поставщиков услуг. Этот барьер стоимости означает, что многие инди-игры по-прежнему зависят от анимации брелока, хотя разрыв сужается с появлением доступных решений без маркеров.

Очистка данных и технические ограничения

Сырые данные захвата движения редко используются из коробки. Маркеры могут быть окклюзированы, освещение может мерцать, и актеры могут сбиваться со своих отметок. Художники по очистке должны вручную пересчитывать, гладкие и корректировать данные в соответствии с пропорциями цифрового персонажа. Персонажи с преувеличенными пропорциями (например, гигантский огр или карикатурный кролик) требуют тяжелой процедурной ретаргетинга, часто жертвуя некоторым естественным движением. Кроме того, захват быстрых, акробатических движений - таких как прыгающий супергерой или гимнастический уклон - трудно, потому что маркеры могут улететь или стать невидимыми для камер.

Необычная долина и ловушки захвата лица

Когда захват движения несовершенен, особенно на лице, он может производить известный эффект сверхъестественной долины. Небольшие несоответствия между звуком, синхронизацией губ и выражением лица заставляют персонажей чувствовать себя тревожными, а не реалистичными. Например, если глаза не отслеживают естественно или если время мигания отключается одним кадром, игроки почувствуют, что что-то не так. Избегание этого требует тщательной постобработки, включая ручную настройку движений глаз, анимацию бровей и вращение челюсти.

Ограниченная пригодность для преувеличенных или фантастических персонажей

Многие жанры — аниме, стилизованное искусство, карикатурные платформеры — намеренно избегают естественного движения человека. Захват движения менее полезен для этих стилей, потому что цель — не реализм, а выразительное преувеличение. Разработчики часто захватывают базовое движение, а затем вручную искажают его, или полностью пропускают мокап. В результате технология остается наиболее эффективной в играх, которые нацелены на фотореалистичную или почти фотореалистичную эстетику.

Будущее захвата движения в NPC видеоигр

Захват движения в реальном времени и виртуальное производство

Следующим рубежом является захват движения в реальном времени, где актерская производительность транслируется непосредственно в игровой движок с минимальной задержкой. Технологии, такие как Live Link Face Unreal Engine, в сочетании с высокопроизводительными графическими вычислениями, позволяют режиссерам видеть анимированного персонажа на экране, когда актер выполняет. Этот конвейер «виртуальной продукции» позволяет немедленно получать обратную связь и итерацию, сокращая время оборота от недель до минут. Он уже используется студиями, такими как Ninja Theory, для внутриигровой кинематографии и, вероятно, станет стандартом для интерактивных диалоговых сцен.

Синтез движения с улучшенным ИИ и процедурное сращивание

Алгоритмы машинного обучения начинают генерировать натуралистические движения NPC, обучаясь на больших наборах данных захвата движения. Такие компании, как RADiCAL и DeepMotion, предлагают инструменты ИИ, которые могут синтезировать новые анимации, например, уникальный шаблон ходьбы, на основе библиотеки записанных результатов. Этот подход может заполнить пробелы для NPC, которые никогда не были индивидуально захвачены, автоматически создавая соответствующие контексту жесты и походки. По мере улучшения этих моделей ИИ они могут уменьшить потребность в массовых сеансах мокапа, все еще обеспечивая массовое органическое движение.

Захват движения всего тела для VR и AR NPC

В виртуальной реальности NPC должны реагировать на физическое присутствие игрока — отклоняться, когда игрок подходит слишком близко, вступать в зрительный контакт, реагировать на жесты. Захват движения всего тела в сочетании с обратной кинематикой в реальном времени позволяет VR NPC демонстрировать эти динамические реакции. Компании уже разрабатывают костюмы с тактильной обратной связью, которые позволяют актерам чувствовать виртуальную среду, позволяя более тонкие физические реакции. Это будет иметь решающее значение, поскольку опыт VR требует все более правдоподобных персонажей-неигроков для поддержания погружения.

Демократизация через безмаркерные и смартфонные системы

Рост безмаркерного захвата движения с помощью обычных камер (например, Apple ARKit или OpenMoCap с открытым исходным кодом) обещает принести профессиональную анимацию независимым разработчикам. Эти системы используют датчики глубины и машинное обучение для оценки позы тела и выражения лица из видео. Хотя точность все еще отстает от оптических настроек студийного уровня, они быстро улучшаются. В ближайшие несколько лет сольный разработчик с iPhone может быть в состоянии захватить анимацию NPC, которая когда-то требовала студии в 500 000 долларов. Эта демократизация может привести к более широкому разнообразию характеристик персонажей в играх за пределами сферы AAA.

Заключение

Захват движения переместился из дополнительного инструмента в фундаментальную опору современной разработки видеоигр, особенно для создания реалистичных неигровых персонажей. Он обеспечивает подлинность, последовательность и эмоциональную глубину, с которой одна только анимация вручную борется, чтобы соответствовать в больших масштабах. Тем не менее, технология не лишена своих ограничений - затраты, требования к очистке и ограничения для стилизованных персонажей остаются значительными препятствиями. В будущем сближение захвата в реальном времени, синтеза на основе ИИ и доступных бесмаркерных систем, вероятно, устранит многие из этих барьеров, позволяя еще более богатые показатели NPC. По мере того, как эти достижения разворачиваются, игроки могут ожидать шага в виртуальные миры, где каждый персонаж - от проходящего незнакомца до центрального союзника - движется и реагирует с поразительным человечеством. Для тех, кто заинтересован в более глубоком погружении в прорывы мокапа в реальном времени, ресурс Epic Games по виртуальному производству [[FLT: 1]] обеспечивает отличную отправную точку.