AIキャラクターから本物の感情と演技を引き出すには?

視聴者が実際に見ているもの

コーパスにある演技の比較テストは、視聴者が何を見ているかを示しています。投稿者は、見ていた点をこう挙げていました。

主に見ていたのは、目の動き、微細な表情、タイミング、感情の移り変わり、そして演技が本当に人間らしく感じられるかどうかです

この一覧のどれだけが時間に関するものかに注目してください。移り変わりもタイミングも、ある瞬間の中ではなく、瞬間と瞬間の間で起きるものです。同じスレッドのある返信はさらに進んで、顔ではなく体でシーンを判断していました。

それでは、彼らのボディランゲージとはあまり合っていません。

どちらの指摘も同じ結論に行き着きます。演技は、より良いモデルが解放してくれる顔の性質ではありません。何が起きたか、キャラクターがそれにどう対処するか、その様子をどれだけの時間見せるか、という関係です。これらはすべて、ショットの説明文で制御できることです。

キャラクターに理由を与える

感情は物語から始まります。手紙を読んだばかりの人、口論に負けた人、いないはずの人を見かけた人には反応する対象がありますが、誰もいない部屋で悲しい顔をするよう言われた人にはありません。SceneMixerでは、台本を読み込むとき、各キャラクターに物語から取り出した短い性格のメモも付き、そのメモはそのキャラクターのために書かれるすべての絵コンテに引き継がれます。ショットの中でキャラクターがすること、括弧内の言い方の指示、セリフの言葉が、カメラが実際に撮るものです。そのため、前のショットで理由を作っておくシーンは、次のショットに演じるものを与えます。

原因を書き、それから反応を書く

結果を表す言葉(打ちひしがれた、威圧的な、大喜びの)は、固定された表情として貼りつけられがちです。原因と身体的な反応を表す言葉なら、演技が生まれます。最後の一行を読み、手紙を古い折り目に沿って畳み、顔を上げない。よい演技のショットには、たいてい1つの流れがあります。

• きっかけ: キャラクターが見る、または聞くもの。できれば前のショットで。
• 最初の反応: 小さく身体的なこと。息を止める、手が止まる、視線が扉に向かう。
• 決断: 次に何をするか。感情が読み取れるようになるのはここです。

1ショットにつき動作は1つにして、十分な秒数を与えます。2秒は反応で、4秒は移り変わりです。3秒の中に、事実の発覚、反応、返答を詰め込んだショットは、3つとも流れてぼやけて再生されます。

言い方はセリフに込める

セリフは映像と一緒に生成されるので、セリフの言い方がそれを言う顔を形づくります。各セリフは、それが話されるショットの中にあります。話し手、丸括弧の中の言い方の指示、言葉、そしてそれを話す声です。「(小声で、彼を見ずに)」は俳優が見て分かる演出指示で、セリフを棒読みから気持ちのこもったものに変えます。聞き手も話し手と同じくらい大切です。セリフが届くあいだ相手が何をするか(あごがこわばる、視線をそらす)を書き、口は閉じたままにします。セリフとリップシンクは、それ自体がコーパスの大きな話題で、2,600件の投稿があります。

見える距離まで寄る

フレーミングによって、演技が見えるかどうかが決まります。小さな反応はクローズアップやミディアムクローズアップに宿り、ワイドショットは何が起きたかを見せても、それが何を意味したかは見せません。対立の場面では2人の顔を交互にカットし、カットごとにフレーミングを変えると、ぎくしゃくした単一ショットではなくカバレッジとして読めるようになります。完成したクリップが、1か所を除いて正しい場合(たとえば表情がほんの少しずれている場合)、表情の変更は、ショットを再生成せずにクリップにその場で加えられる固定の編集の1つです。

視聴者が当てはめる基準は、エフェクトより感情を優先したr/aivideoの短い予告編への返信がずばり言い当てていました。

物語があり、キャラクターの少しの成長があり、緊張感があり、適切なタイミングがあります。

テキストによる演出の限界

• 演出する相手は俳優ではなくモデルです。同じテキストでも毎回テイクの出来が強くなったり弱くなったりするので、肝心のショットは再生成する前提で見込んでおいてください。
• ごく繊細で長く保つ演技がいちばん難しく、はっきりした流れのある短いショットのほうが確実です。
• 実在の俳優の顔や声を真似ることはお断りしています。演技は、創作されたキャラクターのものでなければなりません。
• ここで引用した比較は個々の視聴者の判断であり、件数は1つの期間からのルールベースの概算です。

FAQ

書く側については、映像に表れる性格をキャラクターに与えると絵コンテでセリフを書くをご覧ください。音の面は声を同じに保つの回答で扱っています。件数は集計方法のメモに従っています。