Künstliche Intelligenz beim Filmemachen: Neue kreative Möglichkeiten

Abirami Vina

5 Minuten lesen

22. November 2024

KI in der Unterhaltungsindustrie hilft dabei, neue und kreative Handlungsstränge zu entwickeln. Erfahren Sie, wie KI-Modelle Crew-Mitglieder bei Aufgaben wie Schnitt und Drehbuchschreiben unterstützen.

Der Film Hier wurde vor einigen Wochen veröffentlicht und ist ein großartiges Beispiel dafür, wie künstliche Intelligenz (KI) den Prozess des Filmemachens verändert. Unter der Regie von Robert Zemeckis nutzte der Film eine fortschrittliche KI-gestützte De-Aging-Technologie, um die Schauspieler Tom Hanks und Robin Wright als ihre Figuren über 60 Jahre hinweg zu zeigen. Im Gegensatz zu herkömmlicher CGI (Computer-GeneratedImagery), deren Perfektionierung Monate dauern kann, ermöglichte dieser Ansatz sofortige Verwandlungen am Drehort, was Zeit und Geld spart. Die künstliche Intelligenz verbessert nicht nur das Geschichtenerzählen, sondern macht auch die Filmproduktion effizienter und innovativer.

In der Tat experimentiert Hollywood jetzt mit innovativen Techniken wie KI-gesteuerter Gesichtserkennung, Deepfake-ähnlichen Charakterverbesserungen, automatischer Hintergrundgenerierung und virtuellen Echtzeitumgebungen. Diese Innovationen machen visuelle Effekte realistischer und die Produktion effizienter. Aus Berichten geht hervor, dass der Einsatz generativer KI in der Filmindustrie mit einer beeindruckenden jährlichen Wachstumsrate von 27,2 % rasch zunimmt.

__wf_reserved_inherit
Abb. 1. Ein Überblick über den Markt für generative KI in Filmen.

In den letzten Jahren ist CGI in vielen Filmen zum Standard geworden. Nahezu jeder Film der Marvel Studios nutzt die Technologie der Alterungsrücknahme, um beliebte Figuren wieder aufleben zu lassen, Nostalgie zu erzeugen und das Filmerlebnis zu verbessern. Die künstliche Intelligenz ist heute ein wichtiger Bestandteil des Filmemachens und hilft bei allem, vom Geschichtenerzählen über die Videobearbeitung bis hin zum Schreiben von Drehbüchern. Werfen wir einen Blick darauf, wie die Filmindustrie künstliche Intelligenz einsetzt, um Filme fesselnder, effizienter und visuell beeindruckender zu machen.

KI-gestütztes Storytelling in Filmen

KI hilft Filmemachern, ihre kreativen Visionen zum Leben zu erwecken - von der Alterung von Schauspielern bis zur Schaffung völlig neuer Charaktere. Werfen wir einen genaueren Blick auf einige dieser KI-Anwendungen.

Einsatz von AI für visuelle Effekte im Film

Visuelle Effekte und CGI sind schon seit vielen Jahren ein wichtiger Bestandteil des Filmemachens. Zum ersten Mal wurden sie in Westworld (1973) eingesetzt, wo die Perspektive eines Roboters mit Hilfe von Pixelbildern dargestellt wurde. Im Laufe der Zeit sind diese Technologien immer fortschrittlicher und realistischer geworden. 

Die Integration künstlicher Intelligenz hat sie weiter verbessert. Techniken wie De-Aging, Gesichtsmorphing und KI-gestützte Bewegungserfassung lassen digitale Effekte jetzt natürlicher aussehen. In Gemini Man (2019) zum Beispiel verwandelte die De-Aging-Technologie den damals 50-jährigen Will Smith in eine überzeugende 23-jährige Version seiner selbst. Dadurch wurde die Figur Junior zum Leben erweckt.

__wf_reserved_inherit
Abbildung 2. Will Smith wurde von 56 Jahren auf 23 Jahre gealtert.

So funktioniert De-Aging-Technologie, die KI nutzt:

  • Gesichtserkennung: Hochauflösende Scans werden verwendet, um komplizierte Details des Gesichts eines Schauspielers zu erfassen, wie z. B. Hauttextur, Poren und Gesichtskonturen.
  • AI-Modelle: Modelle für maschinelles Lernen analysieren Archivmaterial oder Referenzbilder, um Gesichtszüge, Ausdrücke und Bewegungen nachzubilden.
  • Leistung Erfassung: Die Bewegungen und Ausdrücke der Schauspieler werden mit Motion-Capture-Technologie aufgezeichnet, um eine natürliche, realistische Darstellung zu gewährleisten.
  • CGI Wiederaufbau: Ein digitales Modell wird erstellt und nahtlos mit Live-Action-Filmmaterial gemischt, wobei die Mimik des Schauspielers auf die digitale Figur übertragen wird.
  • Beleuchtung und Texturanpassungen: Hochentwickelte Rendering-Techniken passen Hautton, Beleuchtung und Umgebungsinteraktionen an, um sicherzustellen, dass die digitale Figur natürlich in die Szene passt.

Dieses Verfahren ermöglicht es Filmemachern, einen verblüffenden Realismus zu erreichen, sei es bei der Erstellung jüngerer Versionen von Schauspielern, völlig neuer Charaktere oder bei der Verbesserung komplexer visueller Effekte.

Die Rolle von Vision AI bei der Verbesserung der visuellen Effekte im Film

Es ist wichtig zu bedenken, dass KI bei visuellen Effekten und CGI ein weites Feld ist, das eine Vielzahl von Techniken und Ansätzen umfasst. Eine Schlüsseltechnologie, die hinter diesen Innovationen steht, ist zum Beispiel die Computer Vision, ein Zweig der KI, der Maschinen hilft, visuelle Daten zu analysieren und zu verstehen. Computer Vision allein macht visuelle Effekte zwar nicht möglich, aber sie spielt eine entscheidende Rolle bei der Verbesserung ihrer Realitätsnähe und Integration.

Die Objektverfolgung ist eine Aufgabe der Computer Vision, die dabei hilft, die Bewegung von Objekten oder Schauspielern in einer Szene zu verfolgen, um sicherzustellen, dass die digitalen Effekte mit dem Live-Filmmaterial übereinstimmen. Bei der Objektverfolgung werden Videobilder analysiert, um die Position und Bewegung eines Objekts zu erkennen. Diese Informationen werden verwendet, um digitale Elemente wie CGI-Charaktere oder Effekte so zu verankern, dass sie sich natürlich mit dem verfolgten Objekt bewegen. In einer Actionszene kann beispielsweise die Hand eines Schauspielers verfolgt werden, um eine CGI-Waffe oder einen Leuchteffekt nahtlos einzufügen, so dass sie wie ein Teil der physischen Umgebung wirken.

KI-generierte Figuren in Filmen

KI-generierte Charaktere verändern die Art und Weise, wie Filmemacher Herausforderungen wie die Vervollständigung von Auftritten nach dem Tod eines Schauspielers angehen. In "Furious 7" war die KI entscheidend, um Paul Walkers Figur Brian O'Conner nach seinem frühen Tod wieder zum Leben zu erwecken. Die Filmemacher setzten CGI und KI ein, um Walkers Gesicht digital nachzubilden, und verließen sich dabei auf seine Brüder Caleb und Cody sowie den Schauspieler John Brotherton, die als Stellvertreter fungierten. Die künstliche Intelligenz analysierte Walkers frühere Auftritte, um seine Mimik und Bewegungen genau nachzubilden, während vorhandene Tonaufnahmen für die Erstellung seiner Dialoge verwendet wurden. Der innovative Einsatz von KI ermöglichte die Fertigstellung des Films und trug dazu bei, Walkers Vermächtnis zu würdigen.

__wf_reserved_inherit
Abb. 3. Überlagerung des Gesichts von Paul Walker auf den Körper von Cody Walker.

KI-gesteuerte Drehbucherstellung

Generative KI beschleunigt die Vorproduktionsphase des Filmemachens, indem sie bei kreativen Aufgaben wie dem Schreiben von Drehbüchern und der Entwicklung von Geschichten behilflich ist. KI-Modelle sind in der Lage, Skripte und Dialoge aus verschiedenen Filmen zu analysieren und auf der Grundlage vorgegebener Vorgaben Skripte oder Geschichten zu erstellen. Diese KI-Tools können Muster in der Erzählung erkennen, Handlungspunkte vorschlagen und sogar Dialoge erstellen, die zu bestimmten Genres oder Tönen passen. Das spart Zeit und bietet Filmemachern einen einzigartigen Ausgangspunkt für ihren kreativen Prozess.

Ein interessantes Beispiel für den kreativen Einsatz von KI beim Filmemachen ist der 2016 von End Cue produzierte Kurzfilm Sunspring. Das Besondere an diesem 9-minütigen Science-Fiction-Film ist, dass sein Drehbuch vollständig von einem KI-Bot namens Benjamin geschrieben wurde. Benjamin wurde anhand von Hunderten von Drehbüchern, Dialogen und Untertiteln aus Filmen der 1980er und 1990er Jahre trainiert und zeigte, wie KI eine neue Perspektive in das Geschichtenerzählen bringen kann.

__wf_reserved_inherit
Abbildung 4. Ein von Benjamin generiertes Skript.

AI in Videobearbeitung und Postproduktion

In der Postproduktion von Filmen werden seit Jahren fortschrittliche Technologien eingesetzt, die jedoch oft viel Zeit und Mühe erfordern. KI ändert das, indem sie den Prozess vereinfacht und neue kreative Werkzeuge wie automatisierte Bearbeitung und Sprachsynthese einführt, die das Filmemachen schneller, einfacher und innovativer machen.

Einsatz von KI für die automatische Videobearbeitung

Das Schneiden ist einer der zeitaufwändigsten Prozesse beim Filmemachen. Die Cutter verbringen in der Regel Stunden damit, das Material zu sichten, die Aufnahmen zu analysieren, die besten Takes auszuwählen und sie aufeinander abzustimmen. Im Film Taken 3 (2014) beispielsweise umfasst eine 6-sekündige Szene, in der Liam Neeson (Bryan Mills) über einen Zaun springt, 14 Schnitte von mehreren Kameras. Um diese kurze Sequenz zu produzieren, musste das Schnittteam das Material von verschiedenen Kameras genau prüfen, mehrere Anpassungen vornehmen und die Sequenz fertigstellen. 

Um diese Prozesse zu beschleunigen, können wir KI-gestützte Schnittwerkzeuge verwenden, um das Material von verschiedenen Kameras zu analysieren und ein kohärentes Endergebnis zu erhalten. Computervision spielt bei diesen Tools eine wichtige Rolle, indem Techniken wie die Szenenklassifizierung eingesetzt werden, um verschiedene Teile des Filmmaterials wie Actionsequenzen, Dialogszenen oder Übergänge zu identifizieren und zu organisieren. So können die KI-Tools die Struktur eines Films verstehen und besser entscheiden, welche Clips verwendet und wie sie angeordnet werden sollen. 

__wf_reserved_inherit
Abb. 5. KI kann den Videobearbeitungsprozess beschleunigen.

AI für Soundtrack-Komposition

In einem Film spielen Titelmusik und Hintergrundmusik eine entscheidende Rolle bei der Gestaltung von Szenen und der Bindung des Films an das Publikum. Die Perfektionierung der Tonhöhe und des Klangs, um der Intensität einer Szene gerecht zu werden - sei es durch Verstärkung bei Actionsequenzen oder durch Abschwächung bei emotionalen Momenten - war schon immer eine Herausforderung für Komponisten. 

Um diesen Prozess zu vereinfachen, verwenden viele Komponisten heute KI-Tools zur Musikerzeugung. Michael Giacchino zum Beispiel, ein Oscar-, Golden Globe- und Grammy-Preisträger, verwendete KI-Tools, um einige der düsteren und atmosphärischen Tracks in The Batman (2022) zu erstellen.

Die Rolle der KI bei Sprachsynthese und Synchronisation

In der Vergangenheit haben sich Tontechniker auf verschiedene Eigenschaften verlassen, um Geräusche in einer Szene zu imitieren. So ist beispielsweise das Brüllen des Tyrannosaurus Rex in Jurassic Park (1993) eine Mischung aus verschiedenen Tiergeräuschen. Gary Rydstrom, der Oscar-prämierte Sounddesigner des Films, verwendete eine Kombination aus dem Quieken eines Elefantenbabys, dem Knurren eines Tigers und dem Glucksen eines Alligators, um dieses unvergessliche Brüllen zu erzeugen. Die Aufnahme dieser Geräusche aus verschiedenen Quellen erfordert Zeit und moderne Aufnahmesysteme. 

__wf_reserved_inherit
Abb. 6. KI kann die Ton-Nachbearbeitung vereinfachen.

Mit KI-Tools, die verschiedene Klänge erzeugen können, lassen sie sich jedoch leicht erstellen. In dem Film Top Gun: Maverick (2022) verlor der Schauspieler Val Kilmer, der Tom Kazansky spielt, aufgrund von Kehlkopfkrebs seine Stimme. Die Filmcrew setzte fortschrittliche KI ein, um seine Stimme wiederherzustellen.

Ethische Überlegungen zur KI in der Filmproduktion

KI kann zwar die Effizienz steigern und neue kreative Möglichkeiten eröffnen, doch ihre wachsende Rolle in der Branche wirft auch wichtige ethische Fragen auf, z. B:

  • Eigentumsrechte: KI-generierte Inhalte werfen Fragen zu Eigentum, Originalität und geistigen Eigentumsrechten auf. Wenn KI-Tools zur Erstellung von Drehbüchern, Charakteren, Musik oder visuellen Effekten verwendet werden, ist es schwierig zu bestimmen, wer als Urheber anerkannt und entschädigt werden sollte.
  • Fehlinformationen in Deepfakes: Die KI-gestützte Deepfake-Technologie kann äußerst realistische Inhalte erstellen. Sie kann jedoch auch falsche Informationen verbreiten, die schwerwiegende rechtliche Folgen haben können.
  • Bedenken hinsichtlich des Datenschutzes: Der KI-Trainingsprozess beim Filmemachen erfordert eine umfangreiche Sammlung personenbezogener Daten, z. B. Bilder, Videos und Stimmen von Schauspielern. Dies wirft Bedenken hinsichtlich der Privatsphäre und des Datenschutzes auf.

Das nächste Kapitel mit AI

Künstliche Intelligenz (KI) hat sich zu einem wichtigen Werkzeug in der Filmbranche entwickelt. Von der Verbesserung visueller Effekte und der Rationalisierung der Postproduktion bis hin zur Erstellung kreativer Inhalte und der Personalisierung von Zuschauererlebnissen - KI verändert die Art und Weise, wie wir Filme konsumieren und produzieren. 

Während die potenziellen Vorteile der KI immens sind, ist es entscheidend, sich mit den ethischen Herausforderungen auseinanderzusetzen, die mit ihrem Einsatz verbunden sind. Indem wir eine verantwortungsvolle KI-Entwicklung fördern und die menschliche Kreativität in den Vordergrund stellen, können wir eine Zukunft schaffen, in der Technologie und Kunst nahtlos ineinander übergehen, das Erlebnis des Geschichtenerzählens verbessern und gleichzeitig die künstlerischen Werte respektieren.

Erfahren Sie mehr über KI in unserem GitHub-Repository und werden Sie Teil unserer aktiven Community. Erkunden Sie verschiedene KI-Anwendungen in Bereichen wie Fertigung und selbstfahrendes Fahren.

Lassen Sie uns gemeinsam die Zukunft
der KI gestalten!

Beginnen Sie Ihre Reise in die Zukunft des maschinellen Lernens

Kostenloser Start
Link in die Zwischenablage kopiert