Нейросеть для работы с видео на примере двух перебивок
Готовлю две перебивки для экскурсионного ролика. Как нейросеть для работы с видео оживляет фото и где проверить свет, ракурс и стык в видеоредакторе.
Евгений
Дизайнер-партнёр LibraChat
8 мин чтения
На девятнадцатой секунде экскурсовод предлагает посмотреть на картотеку. Я вижу его рукав. Он закрыл ящик как раз перед фразой про карточку с загнутым углом. В экскурсионном ролике хочется успеть показать оба предмета и сохранить речь. Нейросеть для работы с видео здесь пригодится для отдельных вставок по моим фотографиям. Длину вставок и их место определю на монтажной шкале.
Экскурсия короткая, о том, как в библиотеке сделали учебную выставку. На столе стоит синий деревянный ящик. В нём несколько сделанных нами карточек без записей о читателях. Латунная рамка на лицевой стенке отражает лампу справа. Во время рассказа рука экскурсовода идёт вдоль стенки к карточкам. У меня сохранились две фотографии того же стола. Я решил попробовать поставить их в том же порядке, в котором человек слышит названия предметов.
Девятнадцатая секунда и пустые места на шкале
Я сначала собрал черновой монтаж со статичными фотографиями. Под слово «картотека» ляжет общий вид ящика. Под «загнутым углом» появится деталь одной карточки. Сколько на это времени? Меньше 3 секунд. Зритель должен успеть понять, что карточка лежит в том самом ящике. Я подвинул второй снимок ближе к концу слова «карточка». Так текст перестал предупреждать о предмете намного раньше, чем он оказался перед глазами.
Перед тем как спрашивать про движение, я сделал заметки к двум кадрам.
На первом видна передняя стенка ящика и часть открытого верха. Оставляю светлое пятно справа на металле. За ним взгляд найдёт край подложки с карточками.
На втором виден загнутый угол. Обрезаю кадр так, чтобы слева ещё попадал в рамку кусочек синей стенки. Без него крупный план легко принять за фото другого стола.
Для обоих кадров проверяю направление. В соседнем снятом плане рука идёт вправо. Новую камеру можно слегка приблизить вдоль того же взгляда, сохранив сторону, с которой мы видим ящик.
В первой раскладке крупный план оказался снят почти с противоположного бока. В общем кадре рамка была у правого края, а на крупном перескочила налево. Я проверил это на стоп-кадрах. Взгляд каждый раз заново ищет знакомые детали. Я взял другой снимок карточки, где синяя стенка была с привычной стороны. Такой кадр проще состыковать и без движения.
Прямо перед вставкой я оставил немножко движения рукава. Зритель успевает увидеть, куда показывает экскурсовод. На следующем кадре ящик впервые виден целиком. Привязка к движению руки помогла мне выбрать из двух общих фотографий ту, где передняя стенка читается сразу. На снимке сверху её закрывали карточки. Пришлось бы объяснять голосом, что это за предмет, хотя экскурсовод уже сказал его название.
Черновик со статичными снимками позволяет сразу проверить, нужно ли оживление вообще. В моём случае хочется немного движения от взгляда на ящик к детали. Сфотографировать предмет можно и заново, если первый ракурс неудобен. В отдельном разборе видео по фото и тексту есть пример того, как описать одно движение на исходном снимке. Для пары вставок я сначала проверяю, выдержит ли его соседний кадр.
Когда нейросеть для работы с видео добавляет новый кадр
Я сравниваю три случая по тому, какой материал уже лежит передо мной.
Задача · Исходник · Что нужно на выходе
Сделать условный кадр для заставки — Описание и замысел, съёмки ещё нет — Новый фрагмент. В LibraChat для этого подходит «Обычное видео»
Добавить движение между двумя снятыми моментами — Своя фотография нужного ракурса — Отдельный клип, который можно проверить рядом с оригиналом
Сохранить речь и заменить картинку ровно на нужной фразе — Снятый эпизод и готовая перебивка — Монтажная шкала с исходным звуком и кадром нужной длины
Вторая строка подходит моей экскурсии. На вход каждого клипа беру по одному фото. Для первого мне нужен спокойный взгляд на рамку. Для второго достаточно небольшого приближения к карточке. Я не прошу придумывать, как устроена картотека внутри, или дорисовывать действие руки. Тогда проще оставить вставку коротким иллюстративным кадром. Если в экскурсии важен сам механизм выдвижения ящика, покажу его на снятом видео или на серии своих фотографий.
Нейросеть для работы с видео здесь добавляет материал к монтажу. Речь уже записана в основном эпизоде. Вставки я готовлю отдельно. Когда задача целиком состоит в том, чтобы убрать паузу или переставить отрывки имеющейся записи, я сразу открываю видеоредактор. Там можно выбрать границы кадров и дослушать голос на стыке.
Я отверг простое увеличение. Можно было приблизить снятый кадр на девятнадцатой секунде, оставив в центре место, где стоит ящик. Но рукав всё равно закрыл бы его фасад. Тут рамке нечего показать. Фотография дала ракурс, который действительно был в мастерской. Движение, добавленное к ней, я воспринимаю как оформление. Порядок карточек беру из собственного снимка. Когда рядом с рассказом нужно показать факт, это различие полезнее любого эффекта.
От фотографии к отдельному клипу
Перед работой с перебивками я открываю экран «Тарифы» в аккаунте и проверяю, доступно ли создание роликов на моём плане. Для общего представления о различиях между планами смотрю публичное сравнение. Для работы с собственным снимком понадобится браузер. В LibraChat я открываю «Изображения» в боковой панели. Затем выбираю «Видео» и «Оживление фото». В приложении тоже есть экран «Изображения» для создания ролика по описанию.
Можно зайти из чата. В браузере под плюсом выбираю «Генерируйте видео». Этот пункт открывает экран создания ролика. Перед загрузкой я проверяю, какие пропорции у фото. В режиме оживления формат следует за снимком. У меня экскурсия горизонтальная. Значит, сначала сделаю горизонтальные копии обеих фотографий, оставив запас вокруг рамки и угла карточки. Если отрезать этот запас уже в проекте, движущийся край легко уйдёт за границу.
Прикрепляю фото ящика и даю короткое описание. Для моей задачи подойдёт такой запрос:
Используй приложенную фотографию синего ящика картотеки как основу. Сделай медленное приближение к латунной рамке с той же стороны, с которой сделано фото. Сохрани свет справа и положение карточек. Ящик остаётся неподвижным. В кадре никого нет.
Для второй вставки поменяю в просьбе цель приближения на загнутый угол карточки. Упоминание света оставлю. Даже с одинаковой просьбой стоит сравнить оба результата с фото. У металлической рамки легко увидеть, не пошёл ли блик в другую сторону, пока камера движется. Готовый клип можно открыть в галерее «Мои видео» и скачать. На шкалу он попадёт отдельным файлом.
Просмотр подряд на той же реплике
В редакторе я положу перебивки поверх того места, где экскурсовод говорит о ящике. Дорожку с голосом оставлю непрерывной. Чтобы выбрать кусок первой вставки, включу просмотр с предыдущего предложения. Когда на слове «картотека» я ещё вижу рукав, придётся сдвинуть начало перебивки. Крупный план карточки поставлю ближе к концу фразы, где её угол уже объяснили.
После подрезки смотрю на середину каждого фрагмента. Вставка может начаться удачно, а затем приблизиться слишком сильно. Мне достаточно оставить ту часть, где рядом с карточкой всё ещё виден синий край. Когда со второго плана пропадает этот ориентир, я перестаю понимать, зачем мне движение. Тогда на шкале остаётся фотография. Голос уже записан и держит длительность вставки независимо от решения о кадре.
Я сравниваю свет по одному пятну на металле, которое видно ещё в снятом эпизоде. Если в перебивке оно появляется резко с другой стороны, переход замечаешь даже при разговоре. Небольшую разницу общей яркости можно выровнять в редакторе. Сторону света так легко не поменяешь. Тогда надёжнее подобрать исходный план с тем же направлением света.
Просмотри стык без звука. Отметь, где оказался блик на рамке и с какой стороны видна синяя стенка.
Послушай тот же участок с голосом. На словах о карточке она уже должна быть узнаваема.
Оставь на шкале исходный снимок, если на новом крупном плане угол расправился или из рамки пропала примета места.
На одном из двух мест может остаться статичное фото. Я попробовал прочитать реплику поверх неподвижного крупного плана и заметил, что голос уже сам ведёт внимание к загнутому углу. Движение полезно там, где связывает планы, а на детали лишняя суета только отнимает время. Возьми два своих соседних снимка, поставь их под одну фразу и попробуй определить единственное место, где лёгкое движение действительно поможет. Теперь на моей девятнадцатой секунде уже пора увидеть ящик целиком.