Как нейросеть может дополнить картинку предметом внутри кадра: задаём место, масштаб и контакт с окружением. Проверяем тень и сохраняем смысл исходной сцены.
Евгений
Дизайнер-партнёр LibraChat
6 мин чтения
Добавить лейку на террасу — не только нарисовать знакомый силуэт. Ей придётся где-то стоять, отбрасывать тень и соседствовать с горшком. Когда нужна нейросеть, чтобы дополнить картинку, я сначала разбираю эти отношения. Иначе новый предмет может выглядеть как наклейка поверх сцены, даже если сам по себе он получился аккуратным.
Разберём добавление внутри существующей рамки на примере иллюстрации. Расширять изображение или восстанавливать достоверный вид утраченного участка сейчас не требуется. Нам нужно согласовать новый элемент с тем, что уже нарисовано. До отправки исходника проверь условия правки присланных изображений и подготовь рабочую копию: неизменённая терраса понадобится для сравнения с добавленной лейкой.
Миф: дополнить картинку нейросеть может только за краем
Слово «дополнить» объединяет разные задачи. Иногда нужно дорисовать поля, потому что исходник не подходит к новому формату. Иногда — добавить предмет в пустое место. А иногда человек хочет восстановить то, что на снимке вообще не видно. Во всех случаях появляется новое содержимое, но критерии разные.
Я собрал для себя маленькую таблицу, чтобы не начинать разговор с неверной операции. Сначала выбираю строку, затем пишу запрос. В примере с террасой размер рамки уже подходит. Пустота возле горшка — часть композиции, которую хочется изменить, а не недостающий край.
Задача · Что меняется · Что считать успешным
Добавить предмет — Содержимое внутри рамки — Новый элемент согласован с окружением
Расширить изображение — Граница кадра и новая область — Продолжение соединяется с прежней сценой
Предположить невидимую часть — Информация, которой нет в исходнике — Правдоподобная версия с пониманием её условности
Если для нового назначения тесна сама рамка, перейди к разбору расширения картинки нейросетью и сначала выбери, какую границу нужно продолжить. Для нынешней лейки я оставлю прежнюю рамку. Это помогает оценивать именно добавление: изменились ли старые элементы ради нового предмета или он действительно нашёл место между ними?
Миф: нейросеть сможет дополнить картинку по названию вещи
«Добавь лейку» сообщает категорию предмета, но почти ничего не говорит о его роли. Нужна металлическая садовая лейка или маленькая декоративная? Она стоит перед горшком, за ним или на ступеньке? Сколько места занимает относительно растения? Разные ответы дадут разные сцены.
Я сначала сделал текстовую раскладку: лейка стоит справа от горшка на той же поверхности, носик направлен к свободному краю, высота меньше горшка. Цвет отдельным условием. Не хочу одновременно менять растение, покрытие террасы и время суток. Это была бы другая композиция, где трудно понять причину улучшения.
В официальной справке Adobe Firefly Generative Fill описывается как добавление или замена содержимого в выбранной области: место отмечается кистью, затем задаётся текст. В чате, где такой выбор не указан, пространственное условие приходится объяснять словами. Наличие кисти у другого сервиса не означает такую же панель в LibraChat.
LibraChat позволяет редактировать присланное изображение по просьбе. Для своего разрешённого исходника можно попробовать такой запрос:
Дополни иллюстрацию террасы одной небольшой красной садовой лейкой. Поставь её справа от существующего горшка на ту же поверхность, не перекрывая стебель. Лейка ниже горшка, носик направлен вправо. Согласуй свет и падающую тень с имеющейся сценой. Сохрани растение, рамку и характер рисунка. Ограничь изменение указанной лейкой, оставив фон без букв и декоративных дополнений.
Это задание на изменение изображения, а не обещание конкретного результата. Название, место и ограничения дают основания для проверки. Если выбранная позиция не читается на исходнике, сначала опиши её точнее или выбери более простой участок.
Миф: хорошая лейка не затрагивает соседние пиксели
Чтобы предмет стоял на поверхности, может понадобиться новая контактная тень. Если он оказался перед горшком, часть горшка должна быть перекрыта. Требование не изменять вообще ничего вокруг иногда противоречит самому добавлению. Другая крайность — разрешить полностью переустроить сцену ради одной вещи.
Я разделяю эти изменения:
допустимое: маленькая тень возле основания лейки;
недопустимое: другой рисунок горшка или новое положение растения.
Так просьба сохранить исходник становится проверяемой, хотя пиксельную неизменность генеративной правки обещать нельзя.
Я проверил бы две связанные области: саму вещь и её контакт с террасой. Затем вернулся бы ко всему рисунку. Бывает, что новый объект выглядит убедительно именно потому, что вся сцена незаметно получила другой свет. Для нашей задачи это уже изменение условия, а не удачное дополнение.
Сохранять смысл сцены не значит запрещать ей взаимодействовать с новой вещью. Мне нужен предмет, который занимает место, а не висит поверх фона. Но характер рисунка, положение горшка и растение остаются опорами. Если они поплыли, одной просьбы увеличить реализм недостаточно: нужно уточнить нарушенную связь.
В нашем примере лейки раньше не было. Мы создаём художественную версию террасы. Совсем другая ситуация — попросить «вернуть настоящую вещь», которую закрывал человек или отрезал край фотографии. По отсутствующему участку нельзя установить достоверный вид только с помощью убедительного изображения.
Я не стал бы подписывать такой результат как восстановленный оригинал. Для творческого эскиза допустимо обсуждать несколько вариантов; для подтверждения того, что действительно стояло на террасе, понадобятся реальные сведения. Эти задачи различаются даже тогда, когда картинки выглядят одинаково правдоподобно.
Поэтому перед работой я записываю назначение: иллюстрация для садовой заметки, а не свидетельство прежнего состояния участка. Это короткое условие помогает и при выборе деталей. Для иллюстрации можно менять цвет лейки. Для документальной задачи фантазия о её цвете не добавляет знания.
Принимаем не предмет отдельно, а его положение
Увеличь картинку возле основания и посмотри, есть ли у лейки опора. Затем отдали изображение: не спорит ли масштаб с горшком? Мне удобнее проходить эти признаки по очереди, чтобы приятный цвет не отвлёк от странного размера.
Перед сохранением сравни:
лейка находится с нужной стороны и не закрывает важное;
её размер соответствует соседним предметам;
ручка и носик не слились с растением;
контактная тень не противоречит видимому свету;
старые детали не заменились новыми без просьбы;
рисунок остался в том же характере, без случайных букв.
На ручной план такой проверки я выделяю 5 минут. При явном дефекте замечание формулирую отдельно: «лейка висит над настилом» или «носик перекрывает стебель». Следующее сообщение в том же чате может уточнить правку, но новую версию тоже нужно сравнить с исходником. При долгой цепочке изменений проще вернуться к сохранённой основе и повторить точное задание.
Открой чат LibraChat, приложи свою разрешённую иллюстрацию и назови место основания лейки относительно горшка. Укажи, какую маленькую тень можно добавить и какие части растения оставить прежними. Проверять предлагаю один конкретный признак: похоже ли, что предмет стоит в сцене, а не приклеен поверх неё?