Ocutri - Ретаргетинг анимаций в MotionBuilder

Связаться

ПОДПИШИТЕСЬ НА НАС:

Ретаргетинг (переназначение) анимаций - это процесс переноса анимаций, предназначенных для одного персонажа, на другого. При этом структуры скелетов и их пропорции могут различаться. Ретаргетинг позволяет использовать один и тот же набор анимаций на различных моделях персонажей.

В данной статье мы будем делать ретаргетинг mocap (motion capture) анимаций, подготовленных лабораторией Motion Capture центра ACCAD (The Advanced Computing Center for the Arts and Design) Государственного университета штата Огайо: http://accad.osu.edu/research/mocap/mocap_data.htm. Из представленных на странице мы используем один из следующих наборов анимаций в формате BVH: Female 1, Male 1, Male 2.

Целевой персонаж для ретаргетинга - девушка Izzy компании Reallusion. Персонаж доступен для свободного скачивания в Unity Asset Store https://www.assetstore.unity3d.com/en/#!/content/50690 или на странице http://www.reallusion.com/iclone/game/ другом формате.

Мы будем работать с программами Autodesk MotionBuilder 2015 для ретаргетинга и iClone 3DXchange5 - для вспомогательных целей.

Наша цель - показать все этапы работы, включая преодоление проблем, которые могу возникнуть. Мы не добивались исключительного качества полученных анимаций. Внимательный читатель также заметит, что мы переопределяем мужские анимации на женский персонаж.

Шаги

Внимание! Для настройки Т-позы какого-либо из скелетов необходимо снять галку [ ] Characterize у обоих персонажей.

При импорте в MotionBuilder указанных анимаций (на примере Male2_*.bvh) можно увидеть следующую картину (см. рисунок). Исправить такую “перекошенность” анимаций можно, экспортировав их из iClone 3DXchange в bvh с флагом “Reset bone offset”.
Вот что мы имеем в виду под “перекошенностью” в кости Hips при импорте анимаций Male2 в MotionBuilder:
В iClone 3DXchange модель импортируется без данного дефекта:
Перетаскиваем (драг-н-дроп) любой из Male2_*.bvh в iClone 3DXchange.
Затем делаем драг-н-дроп всех необходимых Male2_*.bvh в Motion Library:
Нажимаем кнопку Add All to Perform.
Получаем все анимации в разделе Perform Editor.
Экспортируем. File -> Export to Other 3D Format -> Export BVH...
Выставляем галку [x] Reset Bone Offset и экспортируем.

Note: “File Name” — это префикс. Поле не должно быть пустым.
Анимации Male2 исправлены:
Открываем в MotionBuilder Girl.fbx (персонаж доступен для свободного скачивания в Unity Asset Store https://www.assetstore.unity3d.com/en/#!/content/50690).
Делаем File -> Motion File Import…, выбираем любой из исправленных *Male2_*.bvh, для определенности *Male2_A5_PickUpBox.bvh.
Import Options следующие:

Обратите внимание, что мы выбираем пункт Create (не Merge).
Получаем такую сцену:

Avatar — reference Girl;
RL_G6_Hip — рутовая кость (Hips) Girl;
BVH:reference — reference Male2;
BVH:Hips — рутовая кость (Hips) Male2.
Выберем в Asset Browser Templates / Characters / Character.
И перетащим (драг-н-дроп) на скелет Girl. Появится tooltip Characterize, кликаем по нему.

Для удобства перетаскивать можно на Hips-кость в Navigator / Scene, результат тот же:
Получаем следующее сообщение:

Нажимаем Ok.
Еще одно сообщение:

Нажимаем Close.
Переименуем только что созданного персонажа (Character)...

...в GirlChar.
Сделаем двойной щелчок по GirlChar.
Убедимся, что в Character Controls выбран Character: GirlChar и открыта вкладка Definition.
Далее — местами творческий, местами рутинный процесс маппинга костей. LMB (клик левой кнопкой мыши) по кости в окне просмотра:
RMB (клик правой кнопкой мыши) по соответствующей кости в Character Controls / Definition, Assign Selected Bone:
Для удобства скрываем отображение моделей:
Хорошим признаком является соответствие названий костей Girl и внутреннего представления MotionBuilder:
Не забываем про более мелкие кости, такие как Shoulder (Clavicle):
Абсолютный минимум — это все кости из группы “Base (required)”.
После этого нажимаем галку Characterize.
Выбираем Biped:
Переходим к Male2. Перетаскиваем Character на скелет Male2:

Нажимаем Characterize.
Выбираем Biped:
Переименовываем только что созданный Character в MaleChar.
У Male2 сам маппинг костей в порядке.
Проблема в том, что поза, в которой мы его видим, считается Т-позой.
Выключаем [ ] Characterize у MaleChar.
Выбираем BVH:Hips, RMB -> Select Branches.
RMB -> Zero -> Rotation.
Получаем:
Теперь это нужно привести к Т-позе.
Крутим кости с выключенным [ ] Characterize у MaleChar, пока не получим Т-позу.
Включаем [x] Characterize у MaleChar.
Включаем [x] Characterize у GirlChar.
У GirlChar в Character Settings выбираем Input Type: Character, [x] Active; Input Source: MaleChar.
Проигрываем анимацию. Скелет Girl должен повторять анимацию Male2.
Чтобы "запечь" полученную перенесенную на Girl анимацию в ее скелет, нажимаем Plot Character.
Выбираем Skeleton.
Настройки по умолчанию вполне подойдут.

Более подробное описание этих параметров: http://mocappys.com/retargeting-animation-motionbuilder/#Plot_Properties_Window_Explained
Проверяем, что plotting прошел успешно.

С такими настройками персонаж GirlChar должен сохранить анимацию.
Выберите Hips-кость Girl.
File -> Motion File Export…

Нужно убедиться, что выбран Content: Selected Models and Children.
Получаем сообщение:

Нажимаем Yes (три раза).
Вот искомая RL_G6_Hair 1:
Переименовываем эту кость, заменив пробел на подчеркивание (RL_G6_Hair_1).
Еще раз делаем File -> Motion File Export, предварительно выбрав Hips-кость.
На этот раз успешно экспортировали.
Открываем полученный bvh в iClone 3DXchange. Проигрываем анимацию.
Казалось бы, всё хорошо.
Проверим, как полученные bvh открываются в MotionBuilder.
Создаем в MotionBuilder пустой проект.
File -> Motion File Import. Импортируем только что созданную bvh.
Замечаем, что у скелета что-то не то с поворотом головы.
Найденный workaround — экспортировать bvh -> bvh в iClone 3DXchange с флагом [x] Reset Bone Offset.
Экспортируем.
Переимпортируем исправленный bvh в MotionBuilder:

Результат налицо.
Таким образом, мы выполнили ретаргетинг одной анимации.
Выполним ретаргетинг нескольких анимаций.
Откроем нашу основную сцену с MaleChar и GirlChar.
Выберем BVH:Hips.
File -> Motion File Import.
При импорте большого количества анимаций может возникнуть следующая ошибка:
В таком случае делим исходный набор на несколько частей и импортируем их по отдельности. В нашем случае обходимся двумя партиями, в каждой примерно по 75 анимаций.
После того, как закончили импортировать все необходимые анимации, выбираем GirlChar и включаем линковку на MaleChar:
Двойным щелчком по тэйкам запускаем проигрывание соответствующих анимаций.
Далее на GirlChar делаем Plot Character.
Выбираем Skeleton:
Важная галка — [x] Plot All Takes.
Ретаргетинг можно оценить в том числе по поведению модели (скина).
File -> Motion File Export, предварительно выбрав рутовую кость (Hips) Girl.
Как вы уже догадались, полученные bvh необходимо переэкспортировать в bvh в iClone 3DXchange с включенным флагом [x] Reset Bone Offset.
Это — победа.
Для проверки импортируем исправленные bvh в пустую сцену MotionBuilder:
Отсматриваем анимации (двойной щелчок по тэйкам).
На исправленных bvh можно обучать нейросеть.