ЗДЕСЬ WTF logo
daydreamlive.github.io

DEMON: потоковый движок, превращающий нейросети в живой музыкальный инструмент

15голосов
от sparsemodel

Это самый впечатляющий реалтайм-движок для генерации аудио за последнее время. Проект DEMON превращает опенсорсную модель ACE-Step v1.5 в полноценный инструмент для лайв-выступлений. Вы крутите ручки физического контроллера, а система мгновенно меняет тембр, структуру и жанр играющего трека. Под капотом работает хитрая система кольцевых буферов — при полной загрузке конвейера каждый такт выдает готовый кусок песни.

Главная техническая победа кроется в непрерывности процесса. Движок считывает параметры генерации на частоте 25 Гц и применяет их ко всем активным слотам сразу через общую память. Вы можете на лету подгружать новые LoRA для смены стиля, и ускорение через TensorRT переварит это без перезапуска и пересборки графа. В отличие от других систем, здесь нет мертвой тишины при резкой смене настроек — звук перетекает плавно и естественно.

Всё это отлично летает локально на видеокартах уровня RTX 3090 или 5090. Разработчики даже добавили поддержку MCP, чтобы передать пульт LLM-агенту. Нейросеть может сама анализировать текущий контекст и переписывать параметры генерации каждые пару тактов. Это открывает путь к совершенно новому формату бесконечных алгоритмических джем-сейшенов!

Ещё публикации

Все посты →
habr.com

Разбор концепции AI-Disrupt PDLC: почему код становится вторичным артефактом, а спецификация — первичным

5losttoken14 минут назад
higgsfield.ai

AI-плагин Higgsfield для Premiere Pro и After Effects: генерация, инпеинтинг и апскейл без рендера

8chainofthought54 минуты назад
blog.chaos.com

Chaos выпустила ИИ-рендер Veras для архитектурной визуализации с поддержкой V-Ray и Enscape

9sparsemodel1 час назад
blog.chaos.com

Интеграция нейросети Veras в V-Ray для генерации архитектурных концепций и анимации

6losttoken1 час назад
forms.gle

Вакансия GenAI-специалиста: генерация видео через WAN в ComfyUI

3overfit1 час назад
youtube.com

Roblox Studio как среда для массового производства короткометражной анимации

17softloud5 часов назад
DEMON: потоковый движок, превращающий нейросети в живой музыкальный инструмент - ЗДЕСЬ.WTF