SoNata: нейросеть для песни о лейке из аудиодневника
Как нейросеть SoNata создаёт песни по идее и своим словам. Сравниваю два пути на заставке о комнатных растениях, от черновика строки до прослушивания.
Денис
Продакт LibraChat
8 мин чтения
Я готовил короткое начало для заметок о комнатных растениях и записал рукой целый абзац о том, как поливаю их по утрам. Включил пробную музыку. Прочитал абзац поверх неё. За 12 секунд лейка ещё не успела появиться. Для короткой песни-заставки оставил одну фразу и решил заранее, где буду подбирать слова, а где слушать вокал. Нейросеть SoNata предлагает оба пути: придумывает слова по идее или берёт мой текст за основу песни. Дальше результат можно прослушать как отдельный трек.
Мне нужна короткая фраза. По ней слушатель отличит аудиодневник от разговора в комнате. У меня на подоконнике стоит синяя лейка. Она и стала приметой. Про земляную смесь я расскажу голосом чуть позже. До генерации я хочу решить, останется ли лейка в самой песне и кто отвечает за её слова.
Где в SoNata нейросеть берёт слова для песни
У сервиса есть кнопка «Создать песню»: она ведёт в веб-форму, для которой может понадобиться вход. В верхней части формы есть переключатель режимов. «Идея песни» принимает описание, а «Свой текст» открывает поле для готовых строк. В обоих случаях можно задать звучание, затем запустить создание и послушать аудио в плейлисте. Разницу легче понять до того, как вводишь длинную заготовку.
Моя задача · Что уходит в форму · Что слушаю в итоге
Узнать, какие строки могут получиться из идеи — В «Идее песни» описываю голос дневника и образ лейки у окна — Сохранился ли образ, когда сервис сам сочинил слова
Услышать собственную строку в вокале — В «Свой текст» вставляю готовые строки и отмечаю припев — Разборчива ли фраза и где она повторяется
Понять, какая версия войдёт в начало записи — Не меняю исходник и открываю варианты в плейлисте — Можно ли взять фрагмент, не обрывая последнее слово
Для первого пути я держу в заметках очень короткую задумку. Аудиодневник о растениях начинается с образа синей лейки у окна. Настроение спокойное. Песня передаёт ощущение обычного утра. Хотелось бы тихое вступление голосом, чтобы дальше можно было перейти к разговору. Этого описания хватит, чтобы предложить тему и звучание. Фраза про лейку может дойти до песни в другой форме: «Идея песни» как раз оставляет слова сервису.
Мне удобно заранее назвать, чему даю измениться. Когда это только пробная тема, в песне может появиться любое утреннее действие. Когда заставку будут узнавать несколько выпусков подряд, я фиксирую и предмет, и фразу. Окно становится местом действия, а лейка остаётся синей. В первом режиме я оцениваю предложенный образ целиком. Во втором слушаю, остался ли узнаваемым мой.
У второго пути есть причина. Я сделал сценарий первого выпуска и понял, что буду повторять одну и ту же фразу в следующих записях. Тогда удобнее один раз решить, что говорит голос. На полях уместились два начала для песни. «Синяя лейка ждёт у окна» звучит как часть песни, а «открываем короткую заметку о комнатных растениях» сбивается на дикторское объявление. Первую строку проще прочитать вслух. С неё и начал.
Одна строка до кнопки запуска
Мне помогает разделить текст на то, что кто-то споёт, и то, что должен знать сервис. Имя аудиодневника, лейка и окно могут попасть в строку. Спокойный голос, негромкие инструменты и пауза перед речью остаются описанием звучания. Я попробовал прочитать абзац. Остановился на слове «тихо». Оно должно было остаться пометкой на полях.
В чате LibraChat я бы попросил доработать именно слова. Например, если первая версия годится по смыслу, но не помещается в отрывок, можно скопировать такой запрос:
Предложи две короткие версии строки для заставки моего аудиодневника о комнатных растениях. Сохрани синюю лейку и окно. Напиши своими словами, без подробностей об уходе. Отдельно укажи, какие слова могут быть неудобны при чтении вслух, и предложи заменить только их. Верни правки текстом. Не включай описание голоса или инструмента в песенные строки.
Из ответа имеет смысл оставить одну версию и прочитать её самому. У меня было слово «поддон», которое на бумаге кажется ясным. Рядом с непривычным ритмом на нём легко сделать лишний акцент. Сначала я проверил произношение вслух, затем решил, нужна ли эта деталь вообще. Для заставки убрал поддон. В самом аудиодневнике он останется предметом рассказа.
Я ещё записал короткую фразу без музыки. Для этого годится обычное голосовое сообщение самому себе. Услышал паузу после «синяя». Из-за неё цвет звучал отдельно и будто относился ко всему кадру. Вариант «у окна стоит синяя лейка» прочитал связно. Это проверка материала для следующего шага. Как вокал произнесёт его, станет понятно только в аудио, поэтому голосовую пробу я храню рядом с текстом как ориентир.
Перед вставкой в SoNata я проверяю короткий черновик так:
Читаю фразу на одном дыхании и оставляю естественный порядок слов.
Убираю комментарии в скобках и переношу желаемое настроение в настройки звучания.
Вписываю ё там, где она нужна. По подсказкам SoNata можно также выделить ударную гласную прописной буквой, когда произношение требует внимания.
При необходимости использую метки из формы. Куплет обозначаю [Verse], повторяемую строку — [Chorus]. После генерации всё равно слушаю, где модель сделала повтор.
В этот момент текстовый чат выполнил бы свою задачу, помогая выбрать слова и заметить неудобную строку. Музыка и вокал появятся в музыкальной форме. Если нужно понять, какие возможности самому чату доступны по тарифу, есть страница LibraChat. У музыкального кабинета свой баланс и отдельные условия запуска.
От формы к месту, где слышно каждое слово
Вариант со своими строками я бы вставил в поле «Текст». В блоке «Стили» можно задать жанр и характер звучания, а тип вокала выбрать до генерации. Для дневника мне достаточно спокойной фразы и неброского сопровождения. Хочется услышать начало слова «синяя» даже при обычной громкости телефона. Как один образ удерживает куплет или припев, можно сверить с материалом о том, как написать песню.
Я сохраняю отправленные строки у себя. У двух вариантов из плейлиста может быть разное вступление. Мне важно сравнить их на одной и той же фразе. Поэтому под названием черновика я записал критерий: слышно ли «синяя лейка» до того, как захочется перейти к рассказу. Если менять слова, жанр и голос одновременно, по одной удачной версии будет сложно понять, что именно сработало. Для короткой заставки мне достаточно одного параметра на следующую пробу.
Перед запуском я бы прошёл эти пункты:
Посмотри, какой режим выделен наверху. Длинную фразу, которую важно оставить, вставь в «Свой текст».
Убедись, что авторская строка находится в поле текста, а описание звучания — отдельно.
Проверь баланс и показанную на кнопке стоимость. В официальной справке SoNata описаны стартовые баллы для нового пользователя. Сколько доступно именно тебе, видно после входа. Для новых запусков действуют условия сервиса.
После запуска открой варианты в плейлисте. Там можно послушать готовое аудио и скачать выбранный трек.
Мне проще оценить музыку, если коротко сформулировать проверку. На первом прослушивании я бы спросил себя, услышал ли слово «лейка». На втором включил бы тот же отрывок рядом с началом записи голоса. Если конец строки приходится на первые слова рассказа, можно подыскать другой фрагмент или оставить после заставки небольшую паузу. Новый трек в этом случае не обязателен.
Для дневника я затем возвращаюсь к своей звуковой дорожке. Сохраняю выбранный трек отдельно и примеряю его до первой реплики. Песня, которая хорошо слушается целиком, может оказаться неудобной в коротком начале. Бывает, вся узнаваемая строка звучит только после долгого вступления. Тогда я возьму нужный целый музыкальный отрезок, если это разрешено условиями использования, и прослушаю стык. Проверяю и тишину. Паузы часто хватает, чтобы голос дневника вступил спокойно.
Есть ещё одна проверка на живом человеке. Дай ему начало аудиодневника на телефоне и попроси назвать предмет, который он услышал. Слово вспоминается легко, если голос не растянул его на несколько долей и музыка не закрыла согласные. Когда ответ звучит «там вроде что-то про цветы», понятно, какую строку стоит упростить. Попробуй начать с одного своего образа. Полный куплет успеешь придумать после того, как эта деталь перестанет прятаться за музыкой.