Максим Игошев.

52 формы ARKit на реалистичной девушке-гиде

52 формы лица ARKit на готовом персонаже с сохранением утверждённой внешности: лицо работает с захватом мимики на iPhone, липсинком, Unity и Unreal.

Роль
Подготовка лица и формы
Инструменты
Blender, Cycles
Объём
Этап теста, 1 день
Сдано
.blend, FBX, превью
  • Формы на полной силе, имена по спецификации ARKit. Последний кадр: сочетание улыбки, полуморгания и поднятых бровей.

    Формы на полной силе, имена по спецификации ARKit. Последний кадр: сочетание улыбки, полуморгания и поднятых бровей.

  • Кадры теста движения с текстурами клиента: нейтраль, моргание, взгляд влево, взгляд вправо, сдержанная улыбка.

    Кадры теста движения с текстурами клиента: нейтраль, моргание, взгляд влево, взгляд вправо, сдержанная улыбка.

Задача: подготовить полный набор ARKit на сгенерированном ИИ персонаже-гиде, не меняя утверждённой внешности, затем спокойная естественная мимика и липсинк. Клиента и проект не называем.

Что сначала понадобилось модели

  • Левый глаз был сращён с веками: оба глаза стали отдельными объектами, которые поворачиваются для взгляда.
  • Несимметричность до 2 мм: выровнена смещением вершин, без перестройки сетки, развёртка и текстуры не пострадали.
  • Губы были сшиты общими вершинами по линии смыкания: разделены, чтобы рот открывался и сжимался.
  • Зубы и язык добавлены отдельными объектами и следуют за челюстью.

Статус на этом этапе: все 52 формы заведены с точными именами. Готовы глаза, брови, щёки, нос, формы улыбки и сжатия. Формы для речи и челюсть были в доводке, пока перестраивалась полость рта для чистого jawOpen.

Как работаю: вы присылаете модель (.blend или FBX) и одну голосовую реплику. Я готовлю лицо и формы, затем короткий тест липсинка на этой реплике, чтобы вы оценили речь до всего набора. Общение письменное.