Музыка из промпта, которую можно править по нотам

Разработчики Битрикс24 за шесть часов хакатона собрали PromptBeats – браузерное приложение, где мелодию сначала набрасываешь руками, а потом развиваешь промптами. Генерация музыки нейросетью выдаёт здесь текстовую партитуру, и трек правится как документ: заглушил дорожку, поменял ноту, сдвинул темп. Продюсеру, ивент-команде и агентству эта схема пригодится для черновой музыки.

Почему готовый трек от нейронки так неудобно править

Поиск фонового трека для питча или аниматика съедает часы, это знает каждый продюсер. Suno и похожие сервисы отдают цельный аудиофайл. Убрать из него барабаны, переписать бас под голос диктора или сменить тональность нельзя. Клиент говорит «сделайте чуть мягче», и вы снова крутите генерацию, надеясь, что повезёт.

В PromptBeats путь другой. Вы набрасываете мелодию в пошаговом секвенсоре и просите ИИ развить идею или добавить инструменты. Композиция лежит в формате Song JSON – текстовой партитуре с темпом, тональностью, списком инструментов и нотами. Что это даёт на практике:

– любую дорожку можно заглушить или изменить; – длительность и ритм правятся в нотной сетке, так что трек легко подогнать под хронометраж ролика; – лупы экспортируются в WAV, и дальше вы монтируете их в своей рабочей станции.

Как устроен Song JSON и сколько стоил хакатон

Звук в браузере синтезирует библиотека Tone.js, а ноты пишут обычные языковые модели. Модель получает ваш промпт и схему Song JSON, возвращает текст трека, и браузер его проигрывает. Тяжёлой аудиомоделью тут и не пахнет, поэтому всё так дёшево: по словам авторов, на хакатоне они потратили 5 долларов на API OpenAI, и этого хватило на целый день тестов.

Ключи OpenAI, Anthropic и Gemini подключаются через файл настроек. Если посадить на проект ИИ-агента, он сможет собирать совместимые файлы треков вообще без интерфейса.

Честно, как это звучит и держится на длинной дистанции, я не знаю. Синтез в браузере проще студийного, поэтому вижу в PromptBeats инструмент для черновика и согласования. Финал останется за композитором.

Что проверить продюсеру на этой неделе

1. Возьмите ближайший аниматик и соберите подложку с нужным BPM и характером. Покажите её клиенту до разговора с композитором и посмотрите, сколько правок он снимет заранее.
2. Если у вас есть ивент-зона или брендовый спецпроект, спросите технарей подрядчика, можно ли встроить такой движок в промо-сайт или на мультимедийный стенд. Посетитель пишет настроение, система играет трек.
3. Проверьте на прототипе, получится ли заменить базовые синтезаторы на сэмплы бренда или аудиологотип. Это идея, а не готовая фишка проекта.
4. Откройте смету и найдите строку на стоковую музыку для черновиков. Прикиньте, какую часть можно закрыть таким инструментом.

Всё это упирается в процесс: кто в команде тестирует такие штуки, куда их встроить и где оставить место композитору. Если хотите разобрать это на своих задачах, посмотрите страницу AI-консалтинг и обучение команд.