Видео по словам: нейросеть помогает разложить речь
Как превратить три фразы озвучки в понятные кадры, не привязывая каждое слово к отдельной сцене. Размечаем действие, важный титр и замену фразы.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
В коротком ролике о мастерской фраза начиналась словами «Достань кальку, приложи её к выкройке и обведи линию». Первая раскадровка поставила новый кадр на каждое существительное. Получилось много отдельных предметов, а самого действия не видно. Видео по словам легче собрать, если нейросеть сначала помогает разложить речь на смысловые куски. Несколько слов могут вести один кадр. Текст на экране и новая запись голоса остаются отдельными вещами, которые можно менять.
Положи речь на простую шкалу времени
Запиши вступление живым голосом, хотя бы в черновом качестве, или отмерь реплики по чтению вслух. Фраза «Достань кальку» занимает мало времени. «Приложи её к выкройке и обведи линию» длится дольше и показывает одно действие с двумя фазами. Если дать монтажу отдельный план с листом и отдельную сцену с карандашом, зритель не увидит, как совмещаются края. Поэтому полезно объединить оба глагола одним видом сверху.
Открой дорожку и найди границы между такими фрагментами. Отличай паузу для вдоха от момента, когда меняется задача. Речь может ненадолго остановиться в середине действия. Дай руке завершить движение. Кадр с карандашом становится полезным, когда нужно показать, где появилась линия, и тогда уже можно перейти к более крупному виду. Такая разметка помогает и для собственной съёмки, и когда нейросеть придумывает иллюстративный фрагмент.
Если основной голос объясняет заявку на мастер-класс, а кадр показывает пример подготовки, часть текста можно оставить без нового действия. В начале достаточно общего плана с выкройкой. Затем один непрерывный кусок сопровождает совмещение листов. На финале крупный план показывает линию, а титр уточняет, какая именно. Количество кадров вытекает из того, что нужно увидеть, а не из числа слов.
Обведи слово, которое лучше сообщить отдельным титром.
Отдай нейросети роль редактора речи
Попробуй раскадровать фрагмент в LibraChat. Укажи, какая реплика уже записана, и попроси предложить один план на действие, а не по иллюстрации к каждому слову. Когда модель добавляет ненужный предмет, попроси показать, какую часть задачи он помогает объяснить. По ответу легче решить, нужен ли он на экране. Для перехода от раскадровки к генерации полезно объяснение, как устроено видео из нейросети. Доступные модели и объём работы смотри в планах LibraChat.
По этой записанной речи составь короткую раскадровку. «Достань кальку, приложи её к выкройке и обведи линию». Раздели текст на смысловые отрезки. Для каждого укажи действие на экране и один признак, который важно увидеть. Сохрани накладывание листа и начало обводки в одном непрерывном виде сверху. Текст титра выпиши отдельно. Не придумывай новые материалы или реплики.
Сверь предложенную таблицу с записью. Если голос раньше дошёл до слова «обведи», а на экране руки только расправляют бумагу, подними начало плана или сокращай ожидание. Если важная линия видна слишком быстро, подержи картинку до следующей паузы. Разница между скоростью движения и речи бывает заметна только после просмотра. Попроси модель дать точки по словам, а значения времени выставь сам по дорожке, если ей недоступен звук.
Фраза · Кадр · Как проверить
«Достань кальку» — Начало сверху с белым листом — Видно, откуда берут лист
«Приложи её к выкройке» — Тот же план, рука совмещает углы — Сохранились оба угла и край листа
«И обведи линию» — Завершение сверху, затем крупный итог — Зритель видит, где появилась линия
Название приёма — Отдельный титр около результата — Линия остаётся видимой под текстом
Замени слово там, где оно появилось
Допустим, в финальной версии сказано «контур», а автор урока просит говорить «линия сгиба». Сначала посмотри, в каком слое находится старая фраза. В выделенном титре её можно перепечатать и проверить длительность. В дорожке голоса проще перезаписать всю короткую реплику, сохранив нужный тон. Если слово нарисовано внутри сгенерированного кадра, сначала реши, можно ли обойтись чистой версией и самостоятельным текстом. Тогда следующая смена названия затронет только монтаж.
Проверь фразу в двух местах. Первое — звук вокруг перехода, где перезаписанный голос может заметно отличаться по темпу. Второе — взгляд на изображение, где новый более длинный титр может закрывать точку демонстрации. Угол листа и линию лучше снова показать крупно. Название при необходимости остаётся сбоку до следующего смыслового фрагмента. Так исправление одной фразы не требует перестраивать всю сцену.
Полезно оставить рабочую заметку к словам, которые ещё могут уточнить. Для каждого такого места запиши время, текущую реплику и связанное действие. Если название меняется на более длинное, иногда достаточно выбрать меньший титр и дать фразе договорить ещё немного. Если смысл уже другой, проверь, действительно ли старая выкройка иллюстрирует новое действие.
Когда зритель смотрит с субтитрами, объединение двух глаголов остаётся полезным. Дай ему прочитать каждую часть в том порядке, в котором рука движется. Первые слова могут остаться на экране до начала обводки, а последние появиться рядом с линией. Если вторую строку вынести на общий кадр слишком рано, взгляд уйдёт с угла листа и зритель пропустит совмещение.
Отметь, какой исходник удобен для каждого фрагмента. Если есть своя съёмка рук, она хорошо показывает, где бумага проскальзывает. Для иллюстративной вставки можно попросить один кадр с калькой уже на месте. Промежуточное движение тогда лучше оставить в снятой части, чтобы последовательно показать реальную технику. Генерировать весь участок заново из-за названия этапа не потребуется.
Для серии коротких уроков пригодится правило совместного просмотра. Попроси одного человека следить за смыслом слов, другого — за рукой. Если оба остановят ролик на одном месте, понятно, где рассогласование самое заметное. В остальных местах можно сохранить естественный темп, даже когда границы кадров не совпадают с каждой паузой.
Проверь связность, не слушая себя заранее
Просмотри ролик без звука и найди момент появления линии.
Прослушай дорожку отдельно и отметь слово, которое её называет.
Сопоставь два момента на шкале.
Если они разошлись, поменяй время кадра или запись реплики.
Сохрани раскадровку рядом с голосом и титрами. Когда понадобится уточнить инструкцию, будет видно, за какую часть отвечает остальной кадр. Модель поможет предложить новую раскладку по словам, а монтаж сохранит последовательность действий, которую зритель должен увидеть.