Ich habe ein kurzes Video in einen Voice Clone synchronisiert und wäre fast damit durchgekommen
Der Klon überzeugte. Die Mundform war es nicht. Hier ist der Fix, der die Aufnahme gerettet hat.
Ich habe eine Stimme geklont und einen 40-Sekunden-Clip synchronisiert. Der Ton war nah genug, dass zwei Kollegen ihn über Kopfhörer nicht bemerkten. Dann beobachtete ich die Lippen.
Das Missverhältnis zwischen der neuen Stimme und der ursprünglichen Mundbewegung verriet es auf dem Bildschirm. Ich habe den Ausschnitt erneut aufgenommen, um ihn an die neue Lesung anzupassen, und die Illusion blieb bestehen.
Lektion: Audio-Klone täuschen Ohren, nicht Augen. Bei gesprochenen Videos müssen die Darbietung und die visuelle Darstellung übereinstimmen, sonst meldet das Gehirn es.
Verwenden Sie ElevenLabs für Voiceover und Erzählung. Bei Texten vor der Kamera nehmen Sie die Aufnahme neu auf, sodass das Gesicht zum Ton passt.