Мало кто обратил внимание, но энтузиасты тихо портировали сложную систему трекинга движений в интерфейс привычного генератора. Проект ComfyUI-SAM3DBody_utills интегрирует модель SAM 3D Body прямо в ComfyUI, превращая нодовое пространство в локальную студию нейромокапа.
Под капотом алгоритм работает предельно прагматично. Нейросеть анализирует входное видео, оценивает пространственное положение человека и восстанавливает точный 3D-скелет. Полученную структуру можно сразу же использовать внутри графа — например, применить к референсному изображению, чтобы заставить плоского персонажа повторять сложную кинематику реального актера из исходного ролика.
Если копнуть глубже, главная ценность репозитория заключается в форматах сохранения. Инструмент умеет экспортировать извлеченные данные напрямую в файл FBX. Это выводит процесс за рамки генерации видео: теперь можно снять черновой референс на телефон, прогнать через пайплайн и закинуть готовую анимацию костей напрямую в Blender, Unreal Engine или любую другую 3D-среду.
Поделиться:
Смерть публичного веба и опенсорс от PewDiePie: главное из 510-го Журналуса →
Автономное выполнение задач в Claude Code с помощью плагина Supergoal →