AI захват движения

Начни с создания нового чата с AI ассистентом Kapwing — Kai. Загрузи видео с движением, которое хочешь повторить, а потом выбери Seedance 2.5 из селектора моделей в окне промпта. Напиши промпт с просьбой создать упрощённое видео захвата движения. Рекомендуем начать с промпта из ссылки выше и из раздела FAQ чуть ниже, но ты также можешь написать промпт для mocap с нуля.
Твоё исходное видео будет определять позу, синхронизацию, направление и общее движение персонажа. Когда видео будет готово, ты сможешь скачать его как MP4, запросить изменения через дополнительные промпты или использовать его как видео-референс передачи движения, загрузив изображение персонажа.

Вот промпт, который можно использовать для создания AI mocap видео:

Преобразуй входное видео в упрощённую 3D визуализацию захвата движений. Сохрани позу, время, направление и общее движение исходного объекта, но замени его внешний вид базовыми геометрическими формами: сферы для суставов и простые цилиндры или сужающиеся капсулы для конечностей и туловища. Уменьшай детали и сглаживай мелкие случайные движения, при этом сохраняя основные действия легко читаемыми.

Используй чистый, последовательный 3D стиль с однородными матовыми материалами, простым освещением и нейтральным фоном. Держи объект полностью видимым и центрированным. Сохрани исходный угол камеры и кадрирование, и следи за тем, чтобы геометрия была привязана к телу при его движении. Добавь черты лица и выражения, но не добавляй одежду, текстуры, реквизит, дополнительные конечности или новые действия. Результат должен выглядеть как базовый анимированный mocap риг из простых 3D фигур, а не как реальный человек или статичная диаграмма.

Примечание: Можешь отредактировать промпт, чтобы запросить отсутствие выражений лица или другой вид, например эскиз, деревянную фигурку или геометрический 3D риг. Ты можешь менять стиль и уровень детализации через свой промпт, при этом сохраняя узнаваемость основного действия.

Используй AI захват движений, чтобы визуализировать движение полного тела скелета, включая паттерны ходьбы, спортивные действия, танцевальные движения и боевые искусства. Он также может переносить движения рук и жесты, такие как машущие или указывающие движения, из исходного клипа.

Seedance 2.5 может воссоздавать и подсказки мимики, включая движения глаз и губ. В результате ты получаешь упрощенный способ показать язык тела и выражения лица в видео.

Kapwing использует последние модели AI, включая Kling, Veo, Happy Horse, Minimax и Seedance. Для лучших результатов выбери Seedance 2.5 из выпадающего меню выбора модели в окне Kai prompt.

Выбери клип, где объект и его движения хорошо видны. Чёткая композиция и меньше монтажных переходов или препятствий помогут Seedance следить за действием и сохранить объект видимым в результате. Лучшие референс-видео содержат одного или двух чётких человеческих персонажей.

Для движений рук, мимики или сложной работы ног используй кадры, где эти движения хорошо видны. Чёткий референс облегчит пересоздание жестов и тайминга, который ты хочешь показать.

Да, ты можешь использовать своё сгенерированное mocap видео как эталон движения в AI Motion Transfer, а затем объединить его с персонажем, моделью или изображением в стиле инфлюэнсера. Эталонный клип может помочь направить новые перформансы на разных объектах.

Сохраняй клипы с движениями, которые ты можешь захотеть использовать повторно, например ходьба, танец, жест или спортивный трюк. Так у тебя будет растущая библиотека эталонов движений для будущих видео.

Создавай riferenze в стиле mocap для концептов персонажей игр, хореографии, спортивных демонстраций, последовательностей боевых искусств или обучающих видео. Упрощённый стиль может помочь сделать движение легче для восприятия или придать видео уникальный визуальный стиль.

Ты также можешь использовать созданный клип как отправную точку для видео персонажей, контента в соцсетях или творческих вариаций. Так как результат — это отрендеренное видео, оно работает как материал, который ты можешь редактировать и делиться им.

Да, ты можешь отредактировать свой промпт, чтобы создавать разные стили захвата движения из одного исходного видео. Попробуй линии набросков, деревянные палочки, или простые формы вроде сфер для суставов и цилиндров для конечностей.

Ты также можешь описать материалы, фон и количество деталей. Так ты сможешь сделать движение более четким или подогнать его под визуальный стиль видео.