Як отримати справжні емоції та акторську гру від ШІ-персонажів?

Що насправді оцінюють глядачі

Порівняльний тест акторської гри в корпусі показує, за чим судять глядачі. Його автор перелічив, на що він дивився:

Я здебільшого дивився на рух очей, мікроекспресії, тайминг, емоційні переходи й на те, чи гра справді здається людською

Зверніть увагу, наскільки цей перелік про час: переходи й тайминг відбуваються між моментами, а не в одному з них. Відповідь у тій самій гілці пішла далі й оцінила сцену за тілами, а не за обличчями:

Це зовсім не узгоджується з їхньою мовою тіла.

Обидва зауваження ведуть до одного висновку. Акторська гра — не властивість обличчя, яку розблокує краща модель; це зв’язок між тим, що сталося, тим, що персонаж із цим робить, і тим, скільки ми за ним спостерігаємо. Усім цим керує опис кадру.

Дайте персонажеві причину

Емоція починається з історії. Персонаж, який щойно прочитав лист, програв суперечку або побачив того, кого вважав зниклим, має на що реагувати; персонаж, якому сказали «виглядай сумним» у порожній кімнаті, — ні. У SceneMixer, коли сценарій прочитано, кожен персонаж також отримує коротку примітку про характер, узяту з історії, і ця примітка потрапляє в кожну розкадровку, написану для нього. Те, що персонаж робить у кадрі, примітка про подачу в дужках і слова репліки — це те, що камера справді знімає. Тож сцена, яка закладає причину в попередньому кадрі, дає наступному кадру що грати.

Пишіть причину, а потім реакцію

Слова, що описують результат — розбите серце, загроза, захват, — зазвичай «малюються» застиглим виразом обличчя. Слова, що описують причину та фізичну реакцію, дають грі відбутися: вона читає останній рядок, складає лист по давньому згину й не підводить очей. Хороший акторський кадр зазвичай містить один біт:

• Тригер: що персонаж бачить або чує, в ідеалі — у попередньому кадрі.
• Перша реакція: щось мале й фізичне — затримане дихання, рука, що завмерла, погляд до дверей.
• Рішення: що вони роблять далі — саме тут емоція стає зрозумілою.

Тримайтеся однієї дії на кадр і дайте їй достатньо секунд. Дві секунди — це реакція, чотири — перехід. Кадр, у який треба втиснути відкриття, реакцію та відповідь за три секунди, програє всі три змазаною плямою.

Репліка несе подачу

Діалог генерується разом із зображенням, тож те, як вимовлено репліку, формує обличчя, що її вимовляє. Кожна репліка живе всередині кадру, де її кажуть: мовець, примітка про подачу в круглих дужках, слова та голос, яким вони звучать. «(тихо, не дивлячись на нього)» — це вказівка, яку впізнав би актор, і саме вона перетворює репліку з продекламованої на справжню. Слухач важить не менше, ніж мовець: напишіть, що робить інший персонаж, поки репліка влучає, — стискає щелепу, відводить погляд — і тримайте його губи стуленими. Діалоги та синхронізація губ самі по собі становлять велику гілку корпусу — 2,600 дописів.

Достатньо близько, щоб побачити

Кадрування вирішує, чи видно гру взагалі. Дрібні реакції живуть у крупних і середньо-крупних планах; загальний план показує, що сталося, але не що це означало. Перемикайтеся між двома обличчями під час конфронтації й змінюйте кадрування на кожному монтажному стику, щоб сцена читалася як покриття, а не як смиканий один кадр. Коли готовий кліп правильний, крім однієї деталі — наприклад, вираз трохи не той, — зміна виразу є однією з фіксованих правок, які можна внести в кліп на місці, без повторної генерації кадру.

Тест, який застосовують глядачі, прямо назвала відповідь під коротким трейлером у r/aivideo, де емоції поставлено вище за ефекти:

Є історія, є трохи розвитку персонажів, трохи напруги й правильний тайминг.

Обмеження режисури текстом

• Ви режисуєте модель, а не актора: той самий текст щоразу може давати сильніший чи слабший дубль, тож закладіть бюджет на повторну генерацію ключового кадру.
• Найважче даються дуже тонкі, довго утримувані ролі; коротші кадри з чітким бітом надійніші.
• Імітація обличчя чи голосу реального актора відхиляється; гра має належати вигаданому персонажеві.
• Наведені порівняння — це оцінки окремих глядачів, а кількості — наближення за правилами з одного часового вікна.

Поширені запитання

Про письмову частину читайте як дати персонажеві характер, який покаже відео та як писати діалоги в розкадровці; про звук — відповідь про збереження однакового голосу. Підрахунки відповідають примітці про метод.