Почему промт для видео — это другой язык
В Midjourney или Stable Diffusion для фото вы описываете состояние: композицию, свет, детали текстуры. В Sora, Runway Gen-3, Kling, Luma Dream Machine или Pika вы описываете процесс. Модель должна предсказать не один кадр, а 24–120 последовательных, сохраняя идентичность объекта и плавность движения.
Главное различие — временная ось. Промт видео обязательно содержит вектор: куда движется камера, как меняется поза, что происходит с фоном за 4–5 секунд. Без этого вы получите «ожившую фотографию» с дрожанием текстур (фликерингом) или физически невозможными переходами.
Ключевой сдвиг мышления
- Статика → Динамика: добавляйте глаголы движения (поворачивает голову, слегка улыбается, вдыхает).
- Кадрирование → Режиссура: задавайте траекторию камеры (медленный зум, панорама слева направо, handheld дрожание).
- Стиль → Консистентность: прописываете сохранение деталей (сохранять форму ушей, цвет глаз, текстуру кожи).
Пять слоёв рабочего промта
Каждый слой отвечает за свою зону ответственности. Пропуск любого из них передаёт контроль модели — она «придумает» за вас, часто не в вашу пользу. Собирайте промт снизу вверх: от жестких технических ограничений к художественному замыслу.
Кто в кадре
Референс лица (Image-to-Video), ID-эмбеддинг (LoRA, IP-Adapter), описание уникальных признаков: форма челюсти, асимметрия бровей, рожевые 반точки. Для дипфейков — это исходник.
Что происходит
Микродвижения (моргание, сглотание, мимика) + макродвижения (поворот головы, жесты рук). Избегайте «говорит» — пишите «артикулирует слова, губы формируют фонемы, легкое кивание в такт речи».
Точка обзора
Фокусное расстояние (35mm, 85mm), угол (eye-level, low-angle), тип движения (static, slow push-in, orbit, handheld). Static — безопасный дефолт для лиц; orbit — максимальный тест на консистентность 3D-геометрии.
Свет и фон
Key-light/Fill-ratio (напр. Rembrandt lighting, 2:1 ratio), цветовая температура (5600K), фон (размытый офис, однотонный студийный, chroma key green). Фон должен быть статичен или предсказуемо динамичен.
Параметры сэмплера
CFG (Classifier Free Guidance) 7–12, Steps 30–50, Motion Bucket / FPS (для SVD-based), Seed (фиксация шума), Negative Prompt (deformation, blur, extra limbs, flickering, morphing). Это «двигатель» генерации.
Промт для фото vs Промт для видео: разбор отличий
Четыре типа ошибок, которые ломают генерацию
Фликеринг (мерцание)
Текстура кожи, волос или фона меняется кадр за кадром. Лечится: static camera, locked background, увеличение CFG, использование ControlNet Tile/Depth.
Identity Drift (дрейф личности)
Лицо плавно превращается в другое к концу клипа. Лечится: сильный IP-Adapter / LoRA, референс на каждом кадре (ControlNet Reference), фиксация Seed.
Морфинг зубов и рта
Зубы плавят, сливаются, появляются лишние ряды при речи. Лечится: негатив teeth artifacts, fused teeth, gummy smile, отдельная маска для области рта (Inpainting), использование специализированных Lip-sync моделей.
Слайдинг (скольжение)
Нога персонажа скользит по полу, не отталкиваясь; лицо «плывёт» относительно фона. Лечится: ControlNet OpenPose / Depth, указание weight shift (переложение веса) в промте, уменьшение Motion Bucket.
Этика и правовое поле: красные линии
Водяные знаки и детекция
Платформы (TikTok, Reels, YouTube Shorts) внедряют обязачную разметку AI-generated content (C2PA, SynthID). Непомеченный контент снижается в рекомендациях или блокируется.
- Добавляйте видимый дисклеймер «Создано ИИ» в углу кадра.
- Используйте инструменты встраивания невидимого водяного знака (SynthID, Stegastamp).
- Храните промты и сиды — это ваше доказательство авторства процесса.