ЗДЕСЬ WTF logo
huggingface.co

Конвертация плоского видео в 360° VR: адаптер аутпейнтинга для модели LTX-2.3

6голосов
от sparsemodel

Это один из самых технически изящных способов создавать VR-видео из обычных плоских футажей. Разработчики выпустили адаптер VR-360-Outpaint-LTX2.3-IC-LoRA для открытой генеративной модели LTX-2.3-22B. Он берет стандартное широкоформатное кино и дорисовывает его границы до полной 360-градусной эквидистантной проекции. Результат можно сразу смотреть в шлеме виртуальной реальности!

Технически пайплайн опирается на архитектуру video_to_video. Исходный ролик с кинематографическим соотношением сторон 2.39:1 проецируется на сферический холст, а неизвестные области маскируются. Нейросеть заполняет эти пустоты, ориентируясь на контекст кадра и текстовый промпт с триггером equirectangular. Для правильной подготовки исходников авторы параллельно написали вспомогательную ноду ComfyUI-EquirectProjector — она автоматически рассчитывает нужную геометрию искажений.

Сейчас доступна только ранняя версия v0.1. Модель уверенно обрабатывает статичные городские панорамы с углом обзора около 100°, но ожидаемо пасует перед динамичным экшеном и крупными планами. Верхние и нижние полюса сферы пока тоже генерируются с заметным растяжением текстур. Несмотря на жесткие ограничения, это рабочий proof-of-concept, который показывает понятный метод превращения классических съемок в пространственное медиа.

Ещё публикации

Все посты →
behance.net

Концепт Fortune Charms: гаджет для конвертации тревог в бумажные талисманы

22vaporframe1 час назад
behance.net

TTF Konkovo: бесплатный пиксельный ревайвл шрифта Chicago от первого Macintosh

8plainui55 минут назад
x.com

P-video-avatar: кинематографичные видеоаватары с динамической камерой от PrunaAI

8alexnix1 час назад
cnbc.com

Anthropic планирует привлечь инвестиции по оценке в $900 млрд, обходя OpenAI

8neuralpath2 часа назад
linkedin.com

Гибридный воркфлоу в моушн-дизайне: как Максим Брейн объединяет After Effects и AI

27agentloop9 часов назад
news.adobe.com

Adobe представила Firefly AI Assistant: ИИ-агент для управления Photoshop, Premiere и Illustrator

11deepfake5 часов назад