Runway Gen-4 превращает исходное изображение в короткий клип по описанию движения, и именно кадр определяет внешний вид, композицию и свет, а текст отвечает за действие и камеру. Для серии согласованных кадров это важно: если герой и обстановка закреплены в исходных изображениях, клипы выглядят частями одного ролика. Для коротких рекламных вставок и сторибордов режим хорош, для длинного сюжета с речью и сложной актёрской игрой его возможностей мало.
Режим для серии
По справке Runway, Gen-4 создаёт клип длительностью 5 или 10 секунд по входному изображению и текстовому описанию. Изображение задаёт облик кадра, текст описывает движение и камеру, а для лучшего результата нужен качественный исходный кадр без артефактов.
Общую картину сервиса, инструменты монтажа и генерации мы описывали в статье Runway: редактор и генерация видео, а правку готового ролика — в материале про Runway Aleph. Здесь только Gen-4: как из набора кадров собрать серию, которая выглядит цельной.
Пусть студия делает рекламу фитнес-клуба из пяти коротких сцен. Сначала создаётся ключевое изображение героини и четыре кадра обстановки с тем же описанием образа, затем каждый кадр получает запрос на одно движение камеры и одно действие. После просмотра два клипа переделывают из-за дрейфа лица, остальные идут в монтаж. Вся работа строится вокруг таблицы сцен, и случайная удача отходит на второй план.
Главное отличие подхода — разделение ролей. Облик героя, одежда, обстановка и свет решаются на этапе изображения, а модель видео занимается движением. Поэтому работа над серией начинается с набора утверждённых исходных кадров, а видеозапрос пишется позже.
Справка Runway обновляется вместе с моделями: рядом с Gen-4 в ней описана и Gen-4.5, а список режимов и длительностей меняется. Какая модель доступна на вашем плане, проверьте до проекта и откройте справку Runway по написанию запросов для Gen-4. Для сравнения подходов к движению по референсу в другом сервисе полезна статья про Kling Motion Control.
Кадр и референсы
Исходное изображение — самая ценная часть процесса. Модель видео добавляет движение, но ошибки картинки остаются на месте: лишний палец, искажённое лицо и неверный свет перейдут в клип и обычно усилятся.
- Качество кадра: без артефактов, с чёткими руками и лицами, в формате, подходящем для площадки.
- Единый образ: герой, одежда и палитра совпадают во всех исходных кадрах серии; создавайте их с одним описанием и одним референсом.
- Свет и время суток: одинаковы в сценах одной локации, иначе клипы плохо стыкуются.
- Свободное место: оставьте в кадре пространство под движение и под титры, чтобы титры целиком поместились при монтаже.
- Референсы для образа: Gen-4 Image берёт характеристики героя или предмета из одного или нескольких изображений (по справке, до трёх за одну генерацию) и удерживает образ при смене света и места; используйте их на этапе кадров, до видео.
Продумайте и формат кадра заранее: вертикальный для коротких роликов в соцсетях, горизонтальный для сайта и презентаций. Смена формата на середине серии ломает композицию, а доработка кадров под другой формат дороже, чем правильный выбор в начале. Учитывайте также безопасные поля под интерфейс площадки.
Сохраняйте исходные кадры в папке проекта с понятными названиями и записывайте рядом описание. Через месяц, когда понадобится сделать продолжение, вы возьмёте тот же кадр и описание героя и получите согласованную сцену вместо нового персонажа.
Запись движения
Текст запроса к видео должен описывать движение, а пересказывать картинку незачем. Модель уже видит кадр, и повтор описания только отвлекает её от главного. По рекомендациям Runway, формулируют желаемое утвердительно: отрицательные формулировки лежат вне поддержки модели, и результат может оказаться противоположным. Начинают с простого запроса и добавляют детали по ходу.
| Элемент запроса | Пример формулировки | Что проверить |
|---|---|---|
| Движение камеры | Камера медленно приближается | Совпадает ли направление и скорость с замыслом |
| Действие героя | Героиня поворачивает голову к окну | Естественность жеста, поведение рук и лица |
| Среда | Занавеска колышется, за окном движутся облака | Мешает ли фон основному действию |
| Темп | Плавное, спокойное движение | Нет ли рывков и неожиданных ускорений |
| Одно действие на клип | Одна мысль в одном запросе | Разваливается ли сцена, если в запросе несколько событий |
Следите за размахом движения. Резкие и сложные действия повышают риск артефактов: чем больше изменений в кадре, тем сильнее дрейфует образ. Для первых серий выбирайте спокойное движение камеры и одно простое действие героя, а эффектные сцены оставляйте на второй этап, когда процесс отработан и таблица сцен ведётся.
Структура «движение камеры плюс действие героя» хорошо работает: короткая фраза с одним событием предсказуемее длинного описания. Подробнее о формулировках движения для видеомоделей рассказывает статья про промпты для видео.
Какую серию клипов вы хотите собрать по готовым кадрам?
Согласованная серия
Согласованность собирают по шагам: от сценария до сверки соседних клипов.
- Напишите сценарий из коротких сцен по одному действию и составьте таблицу: номер, исходный кадр, запрос на движение, статус.
- Подготовьте и утвердите исходные кадры всех сцен, прежде чем запускать видео: так образ закрепляется до траты генераций.
- Запустите клипы по сценам с одинаковыми формулировками темпа и камеры, меняя только действие.
- Сравните соседние клипы: совпадают ли герой, одежда, цвет и свет на стыке последнего и первого кадров.
- Соберите ролик в монтаже, добавьте титры и звук отдельно и просмотрите целиком на телефоне и на большом экране.
Если один клип выбивается, переделайте только его: исходный кадр и таблица сохраняют остальное. Подход бережёт попытки, потому что серию приходится пересобирать целиком лишь при смене замысла.
Артефакты клипа
Договоритесь о критериях приёмки до начала серии: что считается дрейфом образа, какие дефекты допустимы для соцсетей, какие недопустимы для рекламы на экране. Письменный чек-лист избавляет от споров на финальном просмотре и ускоряет решение по каждому клипу, потому что оценка опирается на общие правила.
Сравните первый и последний кадр каждого клипа с исходным изображением. Изменившиеся лицо, одежда или логотип означают дрейф образа, и такой клип выпадает из серии независимо от качества движения.
Типичные дефекты видны только в движении: дрожание текстур, плывущие края, лишние или исчезающие пальцы, скользящие ноги, ткань, живущая своей жизнью. Просматривайте клип несколько раз, в замедлении и в полном размере, а отметки заносите в таблицу сцен.
Пробную серию оценивайте по числу запусков на один утверждённый клип и по доле клипов, отбракованных из-за дрейфа образа. Высокий брак возвращает к исходным кадрам и описаниям: чаще всего причина там, особенно когда кадры оценивали бегло.
Проверьте и права: условия сервиса для вашего плана, происхождение референсов и согласие людей, чьи образы использованы. Закрепить права и происхождение референсов в общем регламенте поможет консалтинг по внедрению ИИ.