Comment obtenir de vraies émotions et un vrai jeu de personnages vidéo IA ?

Ce que les spectateurs jugent vraiment

Un test comparatif de jeu d'acteur dans le corpus montre ce que les spectateurs jugent. Son auteur a listé ce qu'il observait :

Je regardais surtout des choses comme le mouvement des yeux, les micro-expressions, le timing, les transitions émotionnelles, et si l'interprétation paraît vraiment humaine

Remarquez à quel point cette liste parle de temps : les transitions et le timing se jouent entre les instants, pas dans l'un d'eux. Une réponse dans le même fil est allée plus loin et a jugé la scène aux corps, non aux visages :

Ça ne cadre pas vraiment avec leur langage corporel.

Les deux remarques mènent à la même conclusion. Le jeu n'est pas une propriété d'un visage qu'un meilleur modèle débloquerait ; c'est le rapport entre ce qui s'est passé, ce que le personnage en fait et le temps pendant lequel on le regarde faire. Une description de plan contrôle tout cela.

Donnez une raison au personnage

L'émotion naît dans l'histoire. Un personnage qui vient de lire une lettre, de perdre une dispute ou de voir quelqu'un qu'il croyait disparu a quelque chose à quoi réagir ; un personnage à qui l'on dit d'avoir l'air triste dans une pièce vide, non. Dans SceneMixer, quand le scénario est lu, chaque personnage reçoit aussi une courte note de personnalité tirée de l'histoire, et cette note accompagne chaque storyboard écrit pour lui. Ce que le personnage fait dans un plan, l'indication de ton entre parenthèses et les mots de la réplique sont ce que la caméra filme réellement : une scène qui pose la raison dans le plan précédent donne donc au plan suivant quelque chose à jouer.

Écrivez la cause, puis la réaction

Les mots qui décrivent un résultat (le cœur brisé, menaçant, fou de joie) donnent souvent un visage figé, plaqué. Les mots qui décrivent une cause et une réaction physique laissent le jeu advenir : elle lit la dernière ligne, plie la lettre le long de son ancien pli et ne lève pas les yeux. Un bon plan de jeu contient généralement un seul temps :

• Le déclencheur : ce que le personnage voit ou entend, idéalement dans le plan d'avant.
• La première réaction : quelque chose de petit et de physique : un souffle retenu, une main qui s'arrête, des yeux qui vont vers la porte.
• La décision : ce qu'il ou elle fait ensuite, c'est là que l'émotion devient lisible.

Gardez une seule action par plan et donnez-lui assez de secondes. Deux secondes, c'est une réaction ; quatre, une transition. Un plan qui doit faire tenir une révélation, une réaction et une réponse en trois secondes jouera les trois en un flou.

La réplique porte le ton

Le dialogue est généré avec l'image : la façon de dire une réplique façonne donc le visage qui la dit. Chaque réplique vit dans le plan où elle est prononcée : le personnage qui parle, une indication de ton entre parenthèses, les mots, et la voix qui les dit. « (doucement, sans le regarder) » est une indication qu'un acteur reconnaîtrait, et c'est ce qui fait passer une réplique de récitée à vécue. L'écoute compte autant que la parole : écrivez ce que fait l'autre personnage pendant que la réplique porte (une mâchoire qui se crispe, un regard qui se détourne) et gardez ses lèvres closes. Le dialogue et la synchronisation labiale forment à eux seuls un vaste fil du corpus, avec 2,600 publications.

Assez près pour le voir

Le cadrage décide si un jeu est visible ou non. Les petites réactions vivent dans les gros plans et les plans rapprochés ; un plan large montre ce qui s'est passé, pas ce que cela signifiait. Alternez entre les deux visages dans une confrontation et changez le cadrage à chaque coupe, pour que la scène se lise comme une couverture et non comme un plan unique saccadé. Quand un clip terminé est bon sauf un détail (une expression légèrement décalée, par exemple), changer l'expression fait partie des retouches fixes applicables au clip sur place, sans régénérer le plan.

Le critère des spectateurs est celui que nomme directement une réponse sous une courte bande-annonce dans r/aivideo qui privilégiait l'émotion sur les effets :

Il y a une histoire, un peu d'évolution des personnages, de la tension et un bon timing.

Limites de la direction par le texte

• Vous dirigez un modèle, pas un acteur : le même texte peut donner une prise plus ou moins forte à chaque fois ; prévoyez donc de régénérer le plan clé.
• Les jeux très subtils et tenus longtemps sont les plus difficiles ; des plans plus courts avec un temps net sont plus fiables.
• Imiter le visage ou la voix d'un vrai acteur est refusé ; l'interprétation doit appartenir à un personnage inventé.
• Les comparaisons citées ici sont des jugements de spectateurs individuels, et les nombres sont des approximations fondées sur des règles, sur une seule fenêtre.

FAQ

Côté écriture, lisez donner au personnage une personnalité que la vidéo montre et écrire le dialogue dans le storyboard ; la réponse sur garder la même voix traite le son. Les chiffres suivent la note de méthode.