SymFormerX

Первая российская нейросеть, позволяющая создавать музыкальный контент по текстовому описанию (промпту)
screen picture
О модели

В составе SymFormerX — каскад моделей разных типов: большие языковые модели (LLM), диффузионные модели (Diffusion) и вариационные автоэнкодеры (VAE). Такая архитектура позволяет пользователю сочинять тексты песен и генерировать на их основе композиции в разных жанрах, получая результат в виде готового трека (mp3‑файла) менее чем за минуту

Создайте собственную песню за 1 минуту
Запустите GigaChat на любой платформе, откройте функцию «Создать песню» и творите прямо сейчас!
Выберите фукнцию создания песни в мини-приложении
Задайте параметры и тему
И ваша песня готова!
Можете сохранить песню в чате с GigaChat
Это удобно, если хотите поделиться композицией с друзьями, отправить её в подарок или использовать публикации в соцсетях
Как SymFormerX создаёт музыку


Анализирует музыкальный промпт и текст песни

Определяет жанр, темп, структуру и другие характеристики будущего музыкального трека

Методом обратной диффузии создаёт из «белого шума» музыкальный трек. В итоге получается уникальное музыкальное произведение

Thriving Machine — нейросетевой альбом

Треки распространяются по публичной открытой лицензии ПАО СберБанк: их можно копировать и распространять на любом носителе, в любом формате и в любых целях, включая коммерческие. Например, использовать в качестве фоновой музыки в своих приложениях для ассистентов Салют

Вопросы и ответы

Чем полезна модель?
SymFormer создаёт музыку на основе текстового запроса. Например, можно придумать любое название трека или артиста и попросить придумать трек.
Полученную музыку можно оценивать, составлять плей-листы и скачивать для дальнейшего использования.
Как работает сервис?
SymFormer работает на основе нейросетей CLaMP и SymFormer. Создавать музыку помогла адаптация подхода text-2-image к нотному домену.
После текстового запроса нейросеть получает информацию о стиле и генерирует несколько вариантов структуры будущего трека.
Затем создаёт несколько вариантов композиции, подходящей выбранному стилю, и возвращает самые удачные варианты. В итоге получается уникальный трек, соответствующий текстовому запросу.
Сколько стоит использование треков?
Созданный с помощью сервиса музыкальный контент бесплатный. Его можно использовать как в личных, так и в коммерческих целях, например, для создания фоновой музыки в кафе.
С этим продуктом смотрят
ПАО Сбербанк использует cookie для персонализации сервисов и удобства пользователей.
Вы можете запретить сохранение cookie в настройках своего браузера.