SceneMixer
Italiano
Registrati gratis

Remake: come vengono rilevati dialoghi e musica dal clip e cosa finisce nel tuo episodio

Risposta rapida: Ogni inquadratura della clip viene ascoltata due volte: prima da un riconoscitore vocale che risponde a «qualcuno sta parlando, e cosa ha detto?», poi dal modello che descrive l'inquadratura, a cui vengono fornite come base le parole riconosciute. Le battute quindi vengono riportate, non indovinate dal movimento delle labbra, e un'inquadratura in cui nessuno parla viene scritta come silenziosa. Se la clip ha della musica, la lettura ne annota il carattere, e questo diventa il tono in cui viene scritta la colonna sonora dell'episodio: viene pianificata a partire dalla storyboard dell'episodio, di solito da uno a tre brani, e mixata sotto le voci, come in ogni fiction. Con Ricrea la storia, la lingua dei dialoghi si sceglie nella schermata di caricamento e resta fissa una volta avviata la lettura: le battute sono scritte in quella lingua, tradotte se la fonte parla un'altra lingua. Una battuta che il riconoscitore non è riuscito a capire semplicemente manca; confrontala con la tua clip e aggiungila all'inquadratura nell'editor una volta generata la storyboard. In SceneMixer, una battuta che il riconoscitore non ha capito semplicemente manca nella lettura.
Fotogramma da “Sky Rider's War”, un cortometraggio AI generato end-to-end da SceneMixer (10 personaggi, 1 episodio)
EsempioSky Rider's WarGirato su Pellicola1 episodioProdotto end-to-end da SceneMixer a partire dalla sceneggiaturaGuarda gli episodi

Dopo una lettura con Ricrea la storia, apri l’episodio nel passaggio 3 e leggine il riepilogo: ogni blocco di scena elenca le battute nella forma personaggio: testo. Sostituisci mantiene audio e battute della clip, quindi questa pagina non si applica.

Come vengono ascoltate le battute

Il riconoscimento vocale viene eseguito sull’audio di ogni singola inquadratura. Quello che viene rilevato viene passato alla descrizione dell’inquadratura come «queste parole sono state pronunciate qui»; il sistema di descrizione identifica quindi chi parla dai volti e inserisce la battuta nell’inquadratura. La musica sotto i dialoghi viene gestita correttamente; le urla in mezzo alla folla, gli accenti marcati e le battute molto sommesse sono i casi in cui il sistema fallisce, e in quei casi preferisce omettere invece di inventare. Le battute appaiono quindi nella struttura come in un copione: Scrivi i dialoghi in modo che vengano rilevati.

A storyboard segment: location, time and weather fields, then numbered shots with durations, asset chips and spoken lines
Ogni inquadratura viene ascoltata; quello che viene rilevato viene riportato nell’analisi e finisce come battuta nella struttura.

Perché riportare e non indovinare

Lasciato a sé stesso, un modello di visione a cui si chiede «cosa viene detto qui» a volte sente e a volte no, sulla stessa inquadratura, e inventa battute plausibili quando non è sicuro. Le parole riconosciute, fissate nella descrizione, evitano entrambi i problemi: le stesse parole vengono usate ogni volta che l’inquadratura viene descritta.

Musica

L'analisi chiede una sola volta se la clip ha musica e di che tipo. Se c'è, quella descrizione diventa il tono su cui viene scritta la colonna sonora dell'episodio, in modo che il tuo remake suoni come lo stesso tipo di film; la traccia originale non viene mai utilizzata. Le clip vengono quindi generate senza una musica propria e la colonna sonora viene mixata sotto le voci, esattamente come in un dramma. Quando un episodio non ha una colonna sonora dedicata — un episodio più vecchio, o uno il cui piano non è stato possibile creare — il modello video assegna a quelle clip la loro musica invece, come prima. Il suono ambientale della clip viene annotato ma non riportato. Musica di sottofondo in un dramma breve AI.

Lingua dei dialoghi

Si sceglie nella schermata di caricamento quando prendi Ricrea la storia, di default è la lingua della tua interfaccia (il cinese sul sito cinese), ed è fissa appena inizia la lettura. Le battute sentite in un’altra lingua vengono tradotte in questa. In un remake non si può cambiare dopo, ed è per questo che il passaggio 1 non offre il menu. Sostituisci non ha questa impostazione perché mantiene le voci della clip; se più avanti passi un progetto di sostituzione alla storia, le sue battute sono nella lingua della tua interfaccia. Dopo la lettura.

Quando una battuta è mancante o sbagliata

Il profilo non può essere modificato su SceneMixer, e lo storyboard copia le sue battute parola per parola. Genera lo storyboard, poi apri il segmento dove appartiene la battuta e aggiungila o correggila lì, con il suo parlante; una battuta data alla persona sbagliata si corregge allo stesso modo. Modificare è gratis. Genera lo storyboard.

Nel clipNell’analisiNel tuo episodio
Una battuta pronunciata chiaramenteRiportata, con nome di chi parlaUna battuta nella struttura
Nessuno parlaInquadratura segnata come silenziosaNessuna battuta
Dialogo poco chiaroOmessoAggiungilo a mano nel segmento
MusicaCarattere annotatoTono per la colonna sonora propria dell'episodio, mixata sotto le voci
Suono ambientaleAnnotatoNon riportato; lo storyboard ne crea uno proprio

Domande frequenti

Perché manca una battuta?

Il riconoscitore non è riuscito a capirla. Confrontala con il tuo clip e aggiungila nel segmento dopo aver creato lo storyboard.

Vengono usate le voci originali?

No, se ricrei la storia: le voci vengono dalle impostazioni voce del cast, come in ogni progetto. Sostituisci mantiene l’audio originale della clip.

Il remake può parlare una lingua diversa da quella sorgente?

Sì, con Ricrea la storia: scegli la lingua dei dialoghi nella schermata di caricamento e le battute vengono tradotte durante la lettura.

La musica originale viene riutilizzata?

No, se ricrei la storia. Il suo carattere diventa il tono della colonna sonora dell’episodio, che SceneMixer pianifica dallo storyboard dell’episodio — di solito da uno a tre brani — e mixa sotto le voci. Sostituisci mantiene l’audio originale della clip, musica compresa.

Perché un grido di folla non ha battute?

Il rumore di gruppo viene trattato come suono di sfondo, non come dialogo.

Ascoltato, riportato, scritto

Quello che viene detto nel clip è quello che dice il tuo episodio.

Avvia un remake

Aggiornato il 15 novembre 2026