Du sprichst mit Ich … auf Deutsch?

Dank der neuen Deepfakes-Technologie kann Robert De Niro seine berühmte Linie aus liefern Taxifahrer In einwandfreiem Deutsch – mit realistischen Lippenbewegungen und Gesichtsausdrücken. Die KI-Software manipuliert die Lippen und Gesichtsausdrücke des Schauspielers, damit sie überzeugend mit jemandem übereinstimmen, der dieselben Zeilen in einer anderen Sprache spricht. KI-basierte Technologie kann die Filmindustrie sowohl auf verführerische als auch auf verstörende Weise verändern.

Die Technologie bezieht sich auf Deepfakes, bei denen künstliche Intelligenz verwendet wird, um das Gesicht einer Person auf eine andere Person zu kleben. Es verspricht den Regisseuren, Filme in verschiedenen Sprachen effektiv neu zu machen, wodurch ausländische Kopien für das Publikum weniger aufregend und originalgetreuer werden. Die Möglichkeit, das Gesicht eines Schauspielers mit dieser Leichtigkeit automatisch zu ändern, könnte jedoch auch kontrovers sein, wenn sie nicht mit Sorgfalt verwendet wird.

Die Synchronisationstechnologie für künstliche Intelligenz wurde von entwickelt MakellosDas ist eine britische Firma, die der Regisseur mitbegründet hat Scott MannWer sagt, dass er es satt hat, schlechte ausländische Synchronisation in seinen Filmen zu sehen?

Nachdem er eine ausländische Version seines neuesten Films gesehen hatte, DiebstahlMit De Niro war Mann verblüfft darüber, wie die Synchronisation die sorgfältig ausgearbeiteten Szenen verdarb. (Weigert sich, die Sprache anzugeben). Mann sagt, dass das Überspielen manchmal eine dramatische Änderung des Dialogs beinhaltet, um ihn besser an die Lippenbewegungen des Schauspielers anzupassen. „Ich erinnere mich nur daran, zerstört worden zu sein“, sagt er. „Sie können eine kleine Änderung an einem Wort oder einer Aufführung vornehmen, es kann eine große Änderung an einer Figur im Rhythmus der Geschichte und damit am Film bewirken.“

Mann suchte nach einer akademischen Karriere im Zusammenhang mit Deepfakes, was ihn dazu veranlasste Ein Projekt zum Überspielen künstlicher Intelligenz LED Christian Theobalt, Professor am Max-Planck-Institut für Informatik in Deutschland. Die Arbeit ist komplizierter als herkömmliche Deepfakes. Dabei werden die Gesichtsausdrücke und Bewegungen eines Schauspielers in einer Szene sowie eine Person erfasst, die dieselben Zeilen in einer anderen Sprache spricht. Diese Informationen werden dann kombiniert, um ein 3D-Modell zu erstellen, das Gesicht und Kopf des Schauspielers mit den Bewegungen der Lippen des Wütenden verbindet. Schließlich wird die Partitur in einer Szene digital an den Schauspieler angeheftet.

Flawless wurde vom Theobalt-Projekt ihres Produkts inspiriert. Laut Mann befindet sich das Unternehmen in Gesprächen mit Studios über die Erstellung ausländischer Kopien mehrerer Filme. Andere fehlerfreie Trailer-Clips, die berühmte Linien von Jack Nicholson und Tom Cruise zeigen Einige gute Jungs Auf Französisch spricht Tom Hanks Spanisch und Japanisch in Szenen aus Forrest Gump.

„Es wird sehr bald unsichtbar sein“, sagt Mann. „Die Leute werden etwas sehen und nicht merken, dass es ursprünglich auf Französisch oder irgendetwas anderem gedreht wurde.“

Laut Mann prüft Flawless auch, wie ihre Technologie den Studios helfen kann, kostspielige Remakes zu vermeiden, indem der Schauspieler neue Zeilen sagt. Aber er sagt, einige Schauspieler fühlen sich unwohl, wenn sie sehen, wie sie mit künstlicher Intelligenz manipuliert werden. „Es gibt Angst und es ist wunderbar – das sind die beiden Reaktionen, die ich immer wieder erhalte“, sagt er.

Virginia GardnerDie Schauspielerin, die in dem neuesten Mann-Film mitgespielt hat und dank Flawless selbst Spanisch gesprochen hat, scheint nicht allzu besorgt zu sein, obwohl sie davon ausgeht, dass mit AI modifizierte Filme einen Haftungsausschluss enthalten. „Ich denke, dies ist der beste Weg, um als Schauspielerin Ihre Leistung aufrechtzuerhalten“, sagt sie in einer anderen Sprache. „Wenn Sie Ihrem Regisseur vertrauen und darauf vertrauen, dass dieser Prozess den Film nur verbessern wird, sehe ich wirklich keinen Nachteil.“

Videomanipulation mit künstlicher Intelligenz ist aus gutem Grund umstritten. Kostenlose Deepfakes-Software, die das Gesicht einer Person nahtlos mit einer anderen Person in einer Videoszene wechseln kann, hat sich mit Fortschritten in der künstlichen Intelligenz vermehrt. Die Software identifiziert wichtige Punkte im Gesicht einer Person und verwendet maschinelles Lernen, um zu erfassen, wie sich das Gesicht dieser Person bewegt.