Как оживить персонажа нейросетью по собственному рисунку. Подготовь позу с видимыми руками и ногами, проверь точки движения и выбери короткую анимацию.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
На листе бумажный почтальон держит жёлтую сумку. Я хочу, чтобы в заставке он помахал рукой. Если её контур слился с ремешком, во время движения сумка может поехать за локтем. Чтобы оживить персонажа нейросетью, сначала полезно разделить детали на самом рисунке. Покажу, как подготовить героя для небольшой анимации в открытой демонстрации Animated Drawings и выбрать жест, который легко проверить на одном коротком отрывке.
Как подготовить рисунок, чтобы оживить персонажа нейросетью
Инструмент Animated Drawings от Meta FAIR рассчитан на одну рисованную человекоподобную фигуру на листе. На странице демо рекомендуют, чтобы руки и ноги не перекрывали корпус. Для нашей бумажной заставки мне нужна фронтальная поза, руки слегка разведены, между обувью виден фон. Я сниму или отсканирую только собственный рисунок. На краях не должно быть чужого текста или личных данных. Официальное демо Animated Drawings.
Я сначала покажу на рисунке каждую руку кончиком карандаша. По одной линии от плеча к запястью должно быть понятно, какой участок будет сгибаться. Если жёлтая сумка сидит прямо в сгибе локтя, раздели их небольшим просветом. Сумку можно опустить ближе к поясу, сохранив ремень видимым на корпусе. Для движения одной рукой это упростит считывание силуэта. Когда сумка сама должна качаться, возможно, потребуется отдельная анимация слоя в редакторе.
Что мешает анимации · Что изменить на бумаге · Что проверить на экране
Рука и ремешок слились — Чуть отвести локоть и оставить просвет — Ремешок остаётся частью корпуса
Кисть уходит в тёмный край — Обозначить контур на светлом фоне — Отделение кисти видно при движении
Ноги склеились в один силуэт — Зазор между обувью и коленями — Каждая нога изгибается с нужной стороны
Одна линия одежды закрыла локоть — Подсказать сгиб небольшим изменением угла — Линия плеча остаётся связана с рукой
Если фон у рисунка клетчатый, попробуй снять актуальную версию на белой бумаге либо аккуратно подготовить копию. На краю тёмного рукава линии клетки могут прилипнуть к силуэту. Мне удобнее изначально оставить контур и фон простыми, чтобы меньше исправлять границу в инструменте. Жёлтую сумку легко сохранить отличимой с небольшим тёмным швом вокруг неё.
Если на рисунке несколько фигур, можно подготовить отдельную копию листа под почтальона. При обрезке я оставлю фон вокруг ступней и кистей. Когда пятка касается края файла, по нему трудно проследить полный контур обуви. Особенно заметно это на жесте с поворотом корпуса, если модель перемещает и ноги. Короткий запас белой бумаги полезнее большого поля сбоку, где нет важных частей фигуры.
Как проходит анимация в Animated Drawings
В демонстрации загружают рисунок и проверяют, правильно ли выделен герой. Авторы описывают возможность поправить рамку объекта, маску и позиции суставов, затем выбрать действие. Это три разных решения. Рамка определяет, какой рисунок берём. Маска указывает, какие участки принадлежат герою. Точки движения помогают анимации найти сгибы. Разбор рабочего процесса от Meta AI.
Я посмотрю на три точки:
Плечо стоит у места, где рукав переходит в корпус.
Локоть отмечен на сгибе самой руки и не уехал на ремень.
Кисть остаётся внутри контура ладони, если пальцы обозначены одним общим штрихом.
Когда маска захватила край стола под рисунком, я поправлю её до выбора движения. На неподвижном просмотре полоска может почти сливаться с фоном. В анимации она поднимается вместе с ногой и бросается в глаза. Ещё полезно проверить пространство под обеими руками. Если оно помечено как часть фигуры, между рукавом и жилетом появляется кусок бумаги, который движется вместе с героем.
Есть тонкий случай с тенью от карандаша. При простом выделении она может оказаться за пределами маски, и тогда линия брюк станет тоньше. Если весь образ держится на этой линии, верни её в маску по краю рисунка. Я посмотрю, не остались ли рядом отдельные несвязанные пятна. Для нашей заставки достаточно чёткой границы стопы. Дополнительные штрихи можно сохранить на исходном рисунке для крупного статичного плана.
Как выбрать жест для короткой заставки
Для первого просмотра хватит движения, в котором поднимается одна рука. Если в доступном наборе есть только более широкий жест, выбери тот, у которого рука проходит по понятной дуге. Покажи отрывок человеку, который не видел рисунок до анимации. Если он назвал жест и не обратил внимания на сумку, силуэт считывается. Если первым делом заметил, что сумка растянулась, стоит проверить границу локтя или вернуться к позе на бумаге.
Проиграй сцену в обычном темпе. Проверь, какое действие понятно без подписи.
Останови её в середине, когда рука наиболее высоко. Сверь локоть и ремешок с исходным рисунком.
Открой короткую версию в будущем размере заставки. Если ладонь теряется, можно увеличить чистый силуэт на исходнике или сделать фон спокойнее.
Когда несколько героев будут появляться по очереди, я оставлю пустое место рядом с почтальоном, чтобы в монтаже поместилась короткая подпись. Размер бумаги для каждого персонажа можно выбирать отдельно. После анимации сравни их по высоте головы и положению стоп. Так несколько фигур будут смотреться как участники одной заставки, даже если каждый рисунок подготовлен на отдельном листе.
Если хочется повторить ту же реплику в разных сценах, я сначала сохраню один полный жест и фрагмент спокойной позы до него. В монтаже можно оставить чуть больше неподвижного кадра перед движением, чтобы взгляд успел найти героя. После этого достаточно одного взмаха. Повторение двух или трёх одинаковых дуг уже задаёт смешную настойчивость, которой в простой приветственной заставке может не требоваться.
Если герой заканчивает жест в неудобном положении, можно завершить заставку склейкой с исходной картинкой. Я посмотрю, какой кадр ближе к рисунку по высоте кисти. Тогда пауза между движением и неподвижной позой выглядит естественно, а считывание текста можно оставить на спокойный план.
Если движение задумано для уже снятого портрета, поможет разбор анимации фотографий. В чате LibraChat можно описать короткую сцену и выбрать один понятный жест героя. Если планируешь несколько сценариев, в тарифах LibraChat есть сведения о доступе к инструментам для подготовки текста.
Прямо сейчас обведи на своём рисунке одну руку от плеча до кончиков пальцев. Если по этой линии легко пройти без догадок, она уже подходит для проверки жеста.