Локальная нейросеть для генерации видео на примере Wan 2.2 и ComfyUI: как оценить видеопамять, открыть штатный шаблон и проверить первый короткий ролик.
Евгений
Дизайнер-партнёр LibraChat
8 мин чтения
На столе стоит бумажная вертушка. Мне нужен короткий клип, в котором она немного повернётся, а камера останется на месте. Такой кадр хорош для пробы: если ролик открылся и лопасти сохранили форму, есть что оценивать. Если локальная нейросеть для генерации видео остановилась до сохранения файла, первым делом стоит разбираться с окружением и настройками. Переписывать описание вертушки пока рано.
Разберу маршрут через штатный шаблон Wan2.2 TI2V 5B в ComfyUI. Он подходит для двух входов: текста и изображения. Вместо требования получить сразу длинный клип оставим одно движение и проверим сам процесс. Это план прогона по документации. Скорость и расход памяти зависят от конкретного компьютера и выбранных параметров.
Локальная нейросеть для генерации видео: проверь, что потянет компьютер
Перед скачиванием я смотрю доступную видеопамять, обычную оперативную память и свободное место на диске. Модель потребует хранить несколько файлов. Сколько памяти займёт ролик, зависит ещё от разрешения, числа кадров, версии программы и того, занята ли видеокарта чем-то другим. Короткий запуск с открытым видеоредактором и повтор после его закрытия могут вести себя по-разному.
У разработчиков есть два разных ориентира. Репозиторий Wan показывает команду для одной видеокарты с 24 ГБ видеопамяти или больше в конкретной конфигурации запуска. ComfyUI для своей штатной схемы TI2V 5B с переносом части работы из видеопамяти в оперативную указывает, что модель должна помещаться при 8 ГБ видеопамяти. Оба числа относятся к описанным способам. Для своей машины и параметров ты проверяешь их коротким пробным запуском. Описание модели Wan2.2, пример Wan2.2 в ComfyUI.
Если памяти немного, начни с проверяемой задачи. На листе достаточно отметить план, режим и ожидаемый файл. Мне удобно записать модель как полное имя, а не «Wan для видео». У этой серии есть отдельные варианты на 14B, в том числе для одного типа входа. Подстановка файлов от другой версии изменит условия прогона ещё до первого кадра.
Перед пробой я отдельно записываю, где выполняется расчёт. В официальном примере рядом с шаблоном есть запуск в Comfy Cloud. Если ты проверяешь свой компьютер, открой схему в установленном ComfyUI и используй локально скачанные компоненты. Время облачного запуска ничего не скажет о твоей видеокарте. Напротив, использование той же схемы с одним знакомым исходником помогает повторить тест через неделю после обновления программы.
Компьютер — Видеопамять, обычная память, свободное место — Какие ограничения стоит наблюдать при пробном запуске
Шаблон — Wan2.2 5B Video Generation — Какой путь и набор файлов сравнивать с инструкцией
Вход — Текст для пробы, затем отдельный снимок вертушки — На каком этапе появились проблемы
Выход — Один короткий ролик с видимым движением — Есть ли файл, который открывается и годится для сравнения
Общие различия между покупкой видеокарты и пробой на имеющемся железе разобраны отдельно. Под наш тест пригодится именно графа памяти, а счёт времени имеет смысл взять из собственного запуска. Как выбирать видеокарту для работы с нейросетями.
Подготовь одну схему ComfyUI и три файла модели
В локальном ComfyUI ищи «Wan2.2 5B» в библиотеке шаблонов. В официальном руководстве есть и скачиваемая схема. Я открываю её отдельно от своих предыдущих проектов. Так проще заметить, появился ли старый узел загрузки моделей или осталась настройка от прежнего теста.
У этого примера три компонента. Файлы бери из ссылки, которую даёт руководство ComfyUI для конкретного шаблона. В инструкции перечислены следующие имена и места.
Диффузионная модель wan2.2_ti2v_5B_fp16.safetensors для папки models/diffusion_models.
Кодировщик текста umt5_xxl_fp8_e4m3fn_scaled.safetensors для models/text_encoders.
Модуль VAE wan2.2_vae.safetensors для models/vae.
Выбери эти файлы в узлах загрузки, предусмотренных шаблоном. Если нужный файл есть на диске, но отсутствует в списке, проверь, открыт ли правильный экземпляр ComfyUI и относится ли папка к его набору моделей. Когда схема открылась с отсутствующими узлами, начни со страницы официального примера и версии программы. Случайная замена нескольких элементов затруднит поиск ошибки.
Для первого ролика достаточно знакомой сцены. В чате LibraChat можно заранее разложить её на предмет, действие и положение камеры. Сам рендер для этой проверки выполняется в твоём ComfyUI. Я бы задал примерно такое описание.
На светлом столе стоит бумажная вертушка с четырьмя лопастями. Она делает медленный поворот на месте. Камера неподвижна, предмет целиком виден в кадре. Фон однотонный, свет мягкий.
Если выбираешь генерацию из своего снимка, включи предусмотренную шаблоном загрузку изображения. В качестве пробы лучше взять тот же предмет на простом фоне. Разные предметы в первом и втором запуске усложняют сравнение. Для эксперимента с одной фотографией начни с того, что в кадре уже есть всё важное, а задачу для движения опиши отдельно.
Запусти короткую пробу и найди причину остановки
В узле Wan22ImageToVideoLatent в официальном примере можно менять размер и число кадров. Я начинаю с короткого отрезка и сохраняю настройки. Если хочешь взять иной размер, посмотри допустимые значения для своей схемы. Ещё до запуска отметь, где будет находиться результат и чем откроешь файл. При таком подходе видно, что именно сделала очередь задач, даже если параллельно открыто несколько проектов.
Если программа завершила расчёт и файл открывается, посмотри сначала движение целиком, затем несколько кадров по краям. У вертушки должна сохраняться одна стойка. Лопасти могут немного сместиться относительно исходного рисунка, поэтому удобнее сравнить их число и место крепления на двух стоп-кадрах. Для теста это лучше характеризует результат, чем впечатление от красивого первого кадра.
Когда процесс остановился раньше, посмотри на этап.
Ошибка загрузчика указывает на компонент схемы или его путь. Сопоставь файл с соответствующим полем.
Сообщение о нехватке памяти во время расчёта даёт повод снизить один параметр, например число кадров, в рамках настроек шаблона.
Первая и последняя фазы прошли, а файл не открывается. Проверь, появился ли именно видеофайл и какой узел его сохранил.
Если без изображения проба проходит, а со снимком — нет, снова открой настройки входа. Достаточно одной попытки с тем же текстом и тем же числом кадров. Я сохраняю отдельно вариант без фото и вариант с фото. Это помогает видеть, на каком шаге набор входных данных изменился.
Для сравнения двух запусков записывай время от отправки задачи до появления файла. Отдельно отметь, был ли это первый запуск после открытия программы. Загрузка модели может занять часть ожидания, и следующий расчёт в том же сеансе иногда начинается раньше. Если это важно для твоего проекта, повтори одинаковую короткую задачу после перезапуска. Сравнение двух файлов с разными сценами и разрешениями на этот вопрос не ответит.
Если первая проба выдала статичное изображение в контейнере видео, просмотри несколько кадров из середины. Файл подтверждает, что схема завершилась. Само движение остаётся отдельной проверкой, для которой понадобится посмотреть положение одной лопасти от начала к концу.
Реши, что менять в следующем запуске
Я подписываю файл названием модели и кратким отличием. В первой пробе можно использовать подпись «вертушка, неподвижная камера». Для второй оставляю то же описание и меняю, например, только длительность. Если на длинном отрезке стойка начинает дрожать, краткий результат остаётся под рукой как контроль. Сможешь вернуться к нему, не вспоминая порядок всех последних правок.
Заранее выбери критерий продолжения. Допустим, файл воспроизводится, стойка видна весь клип и рендер укладывается в то время, которое ты готов потратить. Тогда можно добавить другой фон или чуть увеличить разрешение. Если цель пока только посмотреть, как выглядит одно движение, в LibraChat режим видео доступен через раздел «Изображения». Какой доступ подойдёт, можно посмотреть на странице тарифов. Это отдельный маршрут для короткой идеи, а проверка локального шаблона остаётся на твоём компьютере.
Прямо сейчас опиши один кадр в LibraChat и попроси удалить из описания все действия, кроме одного. Затем запусти короткий ролик на подготовленной схеме. Сохрани файл и параметры, при которых он появился. Через день попробуй открыть их снова и по записи вспомнить, какое движение ты оценивал. Такой результат даёт точку отсчёта для следующего локального прогона.