Компания Epic Games, создатель движка Unreal Engine, выпустила значительное обновление своего инструмента создания персонажей MetaHuman, которое теперь позволяет разработчикам импортировать сканы реальных людей для использования в приложениях в режиме реального времени. Обновление позволяет представить будущее, в котором каждый сможет легко создать реалистичную цифровую версию себя в VR и метавселенной в целом.
Инструмент MetaHuman от Epic призван облегчить разработчикам создание широкого спектра высококачественных 3D-моделей персонажей для использования в приложениях для работы в реальном времени. Инструмент работает как продвинутая версия " программы настройки персонажа«, которую можно найти в современных видеоиграх, только с гораздо большим контролем и точностью.
На начальном этапе разработчики могли только создавать своих персонажей из набора предустановленных лиц и использовать инструменты, чтобы изменить внешний вид персонажа в соответствии со своими интересами. Естественно, многие экспериментировали, пытаясь создать свое собственное лицо или лицо известных личностей. И хотя создание персонажей в MetaHuman достаточно быстрое — по сравнению с созданием аналогичной модели вручную с нуля — добиться сходства с конкретным человеком все равно остается непростой задачей.
Но в последней версии появилась функция «Mesh to MetaHuman», которая позволяет разработчикам импортировать сканы лиц реальных людей (или 3D-скульптуры, созданные в других программах), а затем система автоматически генерирует лицо MetaHuman на основе скана, включая полный риггинг для анимации.
Однако здесь все же есть некоторые ограничения. Например, волосы, текстуры кожи и другие детали не генерируются автоматически; на данный момент функция Mesh to MetaHuman в основном сосредоточена на согласовании общей топологии головы и сегментировании ее для реалистичной анимации. Разработчикам все еще необходимо предоставить текстуры кожи и проделать дополнительную работу по подбору волос, волос на лице и глаз для человека, которого они хотят имитировать.
Инструмент MetaHuman пока находится в стадии early access и предназначен для разработчиков Unreal Engine. Несмотря на то, что мы еще не достигли того этапа, когда каждый может просто сделать несколько фотографий своей головы и создать реалистичную цифровую версию себя, совершенно очевидно, что это вполне возможно.
Тем не менее, если цель состоит в том, чтобы создать полностью правдоподобный аватар самого себя для использования в VR и метавселенной в целом, необходимо решить ряд проблем.
Просто сгенерировать модель, похожую на себя, недостаточно. Необходимо также, чтобы модель двигалась, как пользователь.
У каждого человека есть своя уникальная мимика и манеры, которые легко узнаваемы людьми, хорошо их знающими. Даже если модель лица смонтирована для анимации, если она не смонтирована таким образом, чтобы соответствовать вашему выражению лица, и если она не использует реальные примеры ваших выражений, реалистичный аватар никогда не будет похож на вас в движении.
Для людей, которые вас не знают, это не слишком важно, потому что у них нет базовых данных о вашем выражении лица. Но это важно для наиболее близких людей, где даже незначительные изменения в привычном выражении лица и манере поведения могут свидетельствовать о различных состояниях, таких как рассеянность, усталость или даже пьянство.
Пытаясь решить эту конкретную проблему, компания Meta (не путать с инструментом MetaHumans от Epic) работает над собственной системой под названием Codec Avatars, которая предназначена для анимирования реалистичной модели вашего лица с совершенно правдоподобной анимацией, присущей только вам, в режиме реального времени.
Возможно, в будущем мы увидим объединение таких систем, как MetaHumans и Codec Avatars: одна позволит легко создать реалистичный цифровой аватар, а другая — анимировать этот аватар таким образом, чтобы он был уникальным и правдоподобным.