Сцена 3 — улица и трюк с картой локации

Цели урока

• Понять ограничения текстовых промптов для пространственной привязки объектов и как их преодолеть.
• Научиться создавать схематические карты для точного позиционирования элементов в ИИ-генерации.
• Использовать ИИ для переписывания и уточнения промптов на основе визуальных данных.
• Обеспечить последовательность освещения, движения персонажей и объектов в нескольких кадрах.
• Хореографировать движения персонажа и синхронизировать их с музыкальным треком.

О чём урок

В этом уроке мы углубимся в процесс создания реалистичной видеорекламы с помощью ИИ, уделяя особое внимание детальному контролю над элементами сцены и хореографией. Мы рассмотрим, как использовать схематические карты и итеративное уточнение промптов для достижения точного и последовательного результата.

• Применять итеративный подход к промптам для достижения высококачественного результата.

Наш проект — это рекламный ролик с танцующим персонажем на улице. Задача состоит в том, чтобы персонаж танцевал, а различные элементы сцены (углы, реквизит, надувной танцор) оставались зафиксированными кадр за кадром.

После первой генерации мы выявили три основные проблемы:

1. Освещение: Весь ролик должен быть снят при непрерывном полуденном освещении (солнце прямо над головой), но освещение в генерациях было непоследовательным.
2. Направление движения героя: Наш герой двигался в разных направлениях в каждой генерации, нарушая последовательность.
3. Надувной танцор (Skydancer): Его размер и положение постоянно менялись, и он "прыгал" по сцене.

Обычный текст не может точно привязать элементы к конкретному местоположению. Чтобы решить эту проблему, мы используем схематическую карту, которая является одним из самых эффективных хаков для ИИ-генерации видео.

Шаги:

1. Создание схематической карты: Мы используем инструмент GPT Image 2.0 для создания карты сцены.
2. Промпт для GPT Image 2.0: К этому промпту мы прикрепляем местоположение (attaching the location). Переработка промпта с использованием карты в Claude: После получения схематической карты, мы передаем ее в Claude и просим его переписать весь промпт, чтобы он учитывал эту карту.

Результат: Освещение становится более последовательным, направление движения героя в основном корректно, и надувной танцор начинает вести себя лучше.

Несмотря на улучшения, герой все еще слегка "дрейфует" между дублями. Чтобы полностью зафиксировать его положение, мы привяжем его к дереву слева от кадра, создавая "твердую опору" для ИИ.

Шаги:

1. Добавление деталей привязки в промпт (в Claude): Мы снова обращаемся к Claude…

План урока

1. Начальная генерация и выявление проблем
2. Решение проблем с помощью карты (The Schematic Map Trick)
3. Привязка героя к элементам сцены (Solid Anchor)
4. Детализация танца и синхронизация с музыкой
5. Практические советы
6. Итоги