Как добиться настоящих эмоций и игры от ИИ-персонажей?

Что на самом деле оценивают зрители

Парный тест актёрской игры в корпусе показывает, что оценивают зрители. Его автор перечислил, за чем следил:

В основном я смотрел на движение глаз, микровыражения, тайминг, эмоциональные переходы и на то, ощущается ли игра по-настоящему человеческой

Заметьте, как много в этом списке о времени: переходы и тайминг происходят между моментами, а не внутри одного из них. Ответ в той же ветке пошёл дальше и судил сцену по телам, а не по лицам:

Это совсем не вяжется с их языком тела.

Обе мысли ведут к одному выводу. Игра — не свойство лица, которое открывает более сильная модель; это связь между тем, что произошло, тем, что персонаж делает по этому поводу, и тем, как долго мы за этим наблюдаем. Всем этим управляет описание плана.

Дайте персонажу причину

Эмоция начинается в истории. Персонажу, который только что прочитал письмо, проиграл спор или увидел того, кого считал ушедшим, есть на что реагировать; персонажу, которому велено выглядеть грустным в пустой комнате, — нет. В SceneMixer при чтении сценария каждый персонаж получает ещё и короткую заметку о характере, взятую из истории, и эта заметка попадает в каждую раскадровку, написанную для него. То, что персонаж делает в плане, пометка о подаче в скобках и слова реплики — вот что на самом деле снимает камера, поэтому сцена, которая закладывает причину в предыдущем плане, даёт следующему плану, что играть.

Пишите причину, затем реакцию

Слова, описывающие результат — «убитый горем», «угрожающий», «ликующий», — склонны накладываться как застывшее лицо. Слова, описывающие причину и физическую реакцию, позволяют игре случиться: она читает последнюю строку, складывает письмо по старому сгибу и не поднимает глаз. Хороший актёрский план обычно содержит один бит:

• Триггер: что персонаж видит или слышит, в идеале — в предыдущем плане.
• Первая реакция: что-то небольшое и физическое — задержанное дыхание, остановившаяся рука, взгляд на дверь.
• Решение: что они делают дальше — тут эмоция становится читаемой.

Держитесь одного действия на план и давайте ему достаточно секунд. Две секунды — это реакция, четыре — переход. План, в который нужно уместить откровение, реакцию и ответ за три секунды, проиграет все три смазанно.

Подачу несёт реплика

Диалог генерируется вместе с картинкой, поэтому то, как произносится реплика, формирует лицо, которое её произносит. Каждая реплика живёт внутри плана, где она звучит: говорящий, пометка о подаче в круглых скобках, слова и голос, который их произносит. «(тихо, не глядя на него)» — это указание, понятное актёру, и именно оно превращает реплику из прочитанной в прожитую. Слушающий важен не меньше говорящего: напишите, что делает другой персонаж, пока реплика достигает цели — сжимается челюсть, взгляд уходит в сторону — и держите его губы закрытыми. Диалог и синхронизация губ — отдельная большая тема корпуса: 2,600 постов.

Достаточно близко, чтобы увидеть

Кадрирование решает, видна ли игра вообще. Небольшие реакции живут в крупных и средне-крупных планах; общий план показывает, что произошло, но не что это значило. Монтируйте между двумя лицами в конфронтации и меняйте кадрирование на каждой склейке, чтобы сцена читалась как покрытие, а не как дёрганый единый план. Когда готовый ролик верен, кроме одной детали — например, выражение слегка не то, — смена выражения входит в число фиксированных правок, которые можно внести в ролик на месте, не перегенерируя план.

Тест, который применяют зрители, прямо назвал ответ под коротким трейлером в r/aivideo, поставившим эмоции выше эффектов:

Здесь есть история, немного развития персонажей, напряжение и правильный тайминг.

Ограничения режиссуры текстом

• Вы режиссируете модель, а не актёра: один и тот же текст каждый раз может дать более сильный или слабый дубль, поэтому закладывайте перегенерацию ключевого плана.
• Очень тонкая, долго удерживаемая игра даётся тяжелее всего; более короткие планы с ясным битом надёжнее.
• Имитация лица или голоса реального актёра отклоняется; игра должна принадлежать вымышленному персонажу.
• Приведённые здесь сравнения — суждения отдельных зрителей, а подсчёты — приблизительные оценки по правилам за один период.

Вопросы и ответы

О письменной стороне читайте как дать персонажу характер, который видно в видео и как писать диалоги в раскадровке; ответ о сохранении одного и того же голоса охватывает звук. Подсчёты — по примечанию о методе.