Dieser Artikel wurde verfasst unter Mitwirkung von Mitchell-Blockein mit dem Oscar ausgezeichneter ausführender Produzent und Jon Anderson-Stiftungslehrstuhl für Journalismus und Kommunikation an der Universität von Oregon.
Der Oscar-prämierte ausführende Produzent Mitchell Block sagt, er könne sich noch genau daran erinnern, wann er die Künstliche Intelligenz (KI) würde das Filmemachen für immer verändern. Es war kurz nachdem ich Morgan Nevilles Roadrunner, eine Dokumentation über den verstorbenen Anthony Bourdain.
Der Film enthielt KI-generierte Dialoge des verstorbenen Prominenten. Brock hatte keine Ahnung, bis Neville in einem Interview erwähnte, dass die KI diesen Dialog produziert hatte.
"Und das ist das Geniale an der KI - die Idee, dass man etwas erschaffen kann, das es noch nicht gibt, ohne dass man unbedingt ein Heer von Künstlern und Effektleuten braucht, die die ganze harte Arbeit machen", sagt er.
Inhaltsübersicht
Dateien ohne Einschränkungen übertragen
Große Dateien? Kein Problem. MASV hat keine Beschränkungen für Dateipakete und verarbeitet Dateien bis zu 15 TB.
Beispiele für AI in der Filmproduktion
Die vierte industrielle Revolution, die durch Big Data und KI vorangetrieben wird, hat in praktisch jede Branche der Welt Einzug gehalten, auch in die Filmbranche. KI-Tools können nicht nur verstorbene Schauspieler künstlich wiederbeleben. Sie helfen auch den Menschen bei der Skalierung, indem sie Tätigkeiten schneller und effizienter ausführen.
Aber es gibt immer noch Fragen zur Ethik, zum Einsatz und zu den Auswirkungen von KI und ihren Ablegern, dem maschinellen Lernen (ML) und dem Deep Learning (DP). Während einige Experten sagen, dass die KI letztlich Arbeitsplätze schaffen wird, sind sich andere nicht so sicher - vor allem, wenn es um kreative Branchen geht, die einst als sicher vor einer KI-bedingten Störung galten.
Besonders problematisch im Bereich der Film- und Videoproduktion ist die lästige (und zunehmende) Verwendung von generativer KI zur Erstellung von gefälschten Bildern und Videos.
Standbild aus dem Musikvideo zu "The Heart Part 5" von Kendrick Lamar, das die Deepfake-Technologie von Deep Voodoo verwendet.
Während das öffentliche Bewusstsein für KI in der Filmbranche erst kürzlich gestiegen ist, hat sich die Technologie in der Filmbranche bereits etabliert. KI-Tools für das Filmemachen-verwandte Aufgaben wie Audioabmischung, Maskierung, Einfärbung, Sprachdubbing und Videobearbeitung sind inzwischen relativ weit verbreitet.
Die Zahl der Unternehmen, die KI-Produkte und -Dienstleistungen für die Videoproduktionsbranche anbieten, wächst in der Tat.
- Makellos und sein TrueSync-Produkt für KI-Synchronisation, das 2018 im Verborgenen eingeführt wurde. Papiertasse, das eine ähnliche Funktion erfüllt, gibt es seit 2017.
- Digitaler Bereich, Erste Stundeund Tally-Labore virtuelle Figuren und sogar falsche Menschen erschaffen.
- Die Aigency bieten Talentmanagement "für Roboterpersönlichkeiten" - und damit meinen sie virtuelle Menschen, keine eintönigen realen Menschen.
Und die Schöpfer von "South Park" kürzlich erzielte $20M Risikokapital zur Finanzierung ihrer Tiefes Voodoo Projekt, das darauf abzielt, "führende Deepfake-Technologie", "kostengünstige visuelle Effekte" und "synthetische Medienprojekte" zu entwickeln.
Die Aktivitäten rund um KI-gestützte Medien, auch bekannt als synthetische Medien, sind in vollem Gange. Worum geht es bei all dem Trubel eigentlich genau?
Holen Sie sich die beste Übertragung großer Dateien
Melden Sie sich noch heute an und nutzen Sie 20 GB kostenlos für die schnelle und zuverlässige Übertragung großer Dateien mit MASV.
Wie KI Filmemachern und Videoproduzenten hilft
Wie AI hilft Videoproduktions-Workflows sind fast zu zahlreich, um sie vollständig zu behandeln, daher werden wir uns auf einige der wichtigsten Bereiche konzentrieren, wobei das übergreifende Thema lautet, dass KI-Tools helfen, Zeit und Geld zu sparen in jedem von ihnen.
1. Planung vor der Produktion
KI ist bereits ein alltäglicher Bestandteil des Vorproduktionsprozesses. Sie hilft bei der Planung von Dreh- und anderen Zeitplänen, bei der Suche nach geeigneten Drehorten, indem sie reale Daten mit den Anforderungen des Drehbuchs abgleicht, und sogar bei der Organisation von Filmmaterial, damit die Cutter bestimmte Szenen oder Kamerawinkel schneller finden.
"Wenn man darüber nachdenkt, wie man die Vorproduktion vereinfachen kann, und zwar in Bezug auf die Logistik und das Design, die Organisation eines Films - vom Casting über die Budgetierung bis hin zur Aufteilung der Drehorte, der Requisiten und der Garderobe -, dann lassen sich all diese Dinge mit Hilfe von KI anhand des Drehbuchs leicht erledigen und genau budgetieren", erklärt Block.
2. Videobearbeitung
KI-Tools sind in der Welt der Videobearbeitung bereits gut etabliert. Es gibt zwar schon echte KI-Videogeneratoren, aber die meisten KI-Tools für die Videobearbeitung unterstützen menschliche Videoeditoren bei der Skalierung.
- Marquee-Werkzeuge wie Premiere Probieten zum Beispiel KI-Tools zur automatischen Farbanpassung, zur Änderung des Seitenverhältnisses und zur Bewegungsverfolgung.
- Andere Instrumente, wie zum Beispiel Startbahnermöglichen es Editoren, Filmmaterial innerhalb von Minuten mit ML zu rotoskopieren und zu maskieren - eine große Veränderung gegenüber herkömmlichen Methoden, die normalerweise mehrere Stunden dauern.
- Makellosdas oben erwähnte Unternehmen, lernt die Phoneme und Viseme (wie sie klingen und wie sie aussehen, wenn sie Geräusche machen) von Schauspielern. Dadurch können Videobearbeiter "ihre Mimik und Mundbewegungen nahtlos an neu aufgenommene Dialoge anpassen", heißt es in der Los Angeles Times.
- AI hilft auch bei der Restaurierung alter Filme, indem es automatisch Kratzer, Schmutz, Verwerfungen und Flimmern von den Abzügen entfernt.
- Und KI-gestützte Videokompression kann theoretisch Verbesserung der Videoqualität von Produktionen mit geringerer Auflösung.
3. Visuelle Effekte (VFX)
Wir haben erwähnt, wie KI dabei geholfen hat, verstorbene Schauspieler zu reanimieren, und wie maschinelles Lernen die Geschwindigkeit manueller Arbeiten wie Rotoscoping und Maskierung drastisch erhöhen kann. Aber es hat auch zur Rationalisierung der VFX-Pipeline durch die Automatisierung von Teilen der 3D-Modellierung, der Bildverarbeitung, der Farbkorrektur, des Matchmovings und anderer Elemente.
KI wird auch regelmäßig eingesetzt, um lebenden Schauspielern das Alter zu nehmen, digitale Hintergründe zu erstellen und die Beleuchtung zu verbessern, während ihre Fähigkeit, ganze Szenen zu scannen und Objekte zu klassifizieren, den VFX-Prozess weiter beschleunigen kann.
4. Casting und Drehbuchschreiben
KI kann bei Casting-Entscheidungen helfen, indem sie eine Vielzahl von Daten über Darbietungen und Publikumsreaktionen auswertet, um den besten Schauspieler für eine bestimmte Rolle zu finden. Casting-Direktoren laden Drehbücher direkt in KI-Tools wie Largo.aiDabei wird analysiert, welche Schauspieler die Rolle am besten vermarkten können oder wer ein höheres Risiko eingeht.
Aber wie bei jedem guten KI-Tool trifft der Mensch die endgültige Entscheidung. In diesem Fall ist es der Casting-Direktor. Es ist einfach eine fundiertere Entscheidung, die weniger Zeit und Energie erfordert.
Die Technologie wird auch zur Entwicklung von Skripten verwendet. Das Google-Unternehmen DeepMind hat ein Tool namens Dramatron entwickelt, das große Sprachmodelle nutzt, um grobe Skripte erstellen für Filme, Fernsehsendungen oder Theaterstücke. Die KI-generierten Drehbücher enthalten einen Titel, Charakterbeschreibungen, Dialoge und Szenenbeschreibungen.
5. Marketing und Werbung
Studios wie Warner Bros. nutzen KI-gestützte Software wie Cinelytische oder ScriptBook, um vorherzusagen, welche Drehbücher die besten Chancen auf kommerziellen Erfolg haben, und um zu bestimmen, welche Filme gedreht werden und welche nicht.
"Das System kann in Sekundenschnelle berechnen, wofür ein Mensch früher Tage brauchte, wenn es um die allgemeine Bewertung von Filmpaketen oder den Wert eines Stars ging", sagt Cinelytic-Gründer Tobias Queisser in Der Hollywood Reporter.
Das von 20th Century Fox entwickelte neuronale Netz Merlin und ähnliche Tools helfen den Studios bei einer Reihe von Filmverwaltungs- und Werbemaßnahmen:
- Optimierung von Filmtrailern, um die beste Reaktion zu erzielen.
- Optimierung von One-Sheets für die Filmpromotion.
- Planung von Marketingkampagnen nach geografischen und demografischen Merkmalen oder Interessen durch Mikrosegmentierung.
"Wenn man fünf Millionen potenzielle Zuschauer identifizieren kann, um 500.000 Menschen zu einem Bruchteil der Kosten ins Kino zu bringen, ist das für das Filmgeschäft wirklich von Vorteil", sagt Block. "KI kann sowohl Filmemachern als auch Studios, Führungskräften und Geldgebern dabei helfen, herauszufinden, wie sie ihren Film entwickeln, aber auch wie sie ihn finanzieren und vermarkten können."
6. Musikvertonung
Die Besatzungen können KI-fähige Software verwenden, wie z. B. Dynascore um Musik für ihre Videoproduktion zu komponieren. Anstelle von Standardmusik und ihren inhärenten Beschränkungen erzeugt die KI-Kompositionssoftware Musikpartituren, die auf die Schnitte eines Drehbuchs und andere Aktionen abgestimmt sind.
Und die Sony Computer Science Laboratories (CSL) entwickelten Strömungsmaschinenein KI-Musikkomponist, der die Aufgabe hat helfen Die menschlichen Komponisten denken sich verschiedene Akkorde und Melodien aus, die zu ihrem gewünschten Stil passen.
7. Herstellung von
Filme oder Videos, die vollständig von einer künstlichen Intelligenz ohne menschliches Zutun produziert werden, sind immer noch selten, obwohl ein Computerkünstler vor kurzem den Preis der Jury des Kurzfilmfestivals von Cannes für seinen von einer künstlichen Intelligenz erzeugten Text-zu-Video-Film gewonnen hat, Die Krähe.
Ein anderer Nicht-Filmemacher, Adrian Seltzer, erhielt kürzlich Anerkennung für Salzeine Reihe von Kurzfilmen, die auf Twitter veröffentlicht und durch eine Kombination von KI-Tools wie Stable Diffusion, Midjourney, DALL-E 2, Synthesia, Murf und GPT-3 erzeugt werden.
Einfaches Übertragen von Videodateien aus der virtuellen Produktion
Sichere, zuverlässige und schnelle Übertragung von 8K- oder 12K-Videodateien mit MASV.
Potenzielle Probleme mit KI und Filmemachen
"Wir können dem, was wir sehen, nicht mehr uneingeschränkt vertrauen", sagt Robert Wahl, Professor an der Concordia University Wisconsin, in dem bereits zitierten Artikel der LA Times.
Und obwohl die Filmindustrie schon immer versucht hat, das Publikum davon zu überzeugen, seine Ungläubigkeit zu überwinden, hat die Deepfake-Ära eine ganz neue Dimension erreicht.
Selbst Nevilles Roadrunner Film erhielt seine eine gehörige Portion Kritik dafür, dass sie Zuschauer und Kritiker nicht sofort auf die von der KI generierten Inhalte aufmerksam gemacht hat - auch nicht auf die von der Ex-Frau des verstorbenen Prominenten.
Einige Beobachter sind der Meinung, dass Video- und Dialogveränderungstechnologien wie Flawless den Weg für die Aktualisierung oder vollständige Veränderung von Filmen mehrere Jahre später ebnen werden, was nach Ansicht von Kritikern das Risiko birgt, dass die Zustimmung der Originaldarsteller gefährdet wird.
Denn was nützt die menschliche Beteiligung, wenn KI Drehbücher schreiben, Drehorte planen, Schauspieler besetzen und automatisch atemberaubende digitale Effekte erzeugen kann - ja sogar ganze Filme und Videos produzieren kann?
Ein wichtiger Grund ist laut Block die Qualität.
"Ich denke, es ist wie bei allem anderen - nur weil eine Schreibmaschine den Federkiel ersetzte, bedeutete das nicht, dass das Schreiben besser wurde". sagt er und fügt hinzu, dass es letztlich die Menschen sind, die für die menschliche Kreativität und die persönliche Note hinter einem Film, einem geschriebenen Werk oder sogar einem Designerstück sorgen.
"Wir bewegen uns auf eine Welt zu, in der alles digital geschaffen oder nachgebildet werden kann", erklärt er. "Einschließlich uns selbst, als Klone. Bald werden wir in der Lage sein, Designer-Handtaschen oder teure Kleidung in 3D zu drucken. Und wenn man das zu Hause auf seinem 3D-Drucker herstellen kann, was ist dann eine Marke noch wert?"
Er sagt, dass es an den Kritikern, dem Publikum und sogar den Technologieplattformen liegen wird, Filmemacher und Studios zur Rechenschaft zu ziehen, wenn es um den übermäßigen oder unethischen Einsatz von KI in der Videoproduktion geht.
Wird KI das traditionelle Filmemachen ersetzen?
Das Raindance Filmfestival sagt, dass Menschen in einer zunehmend automatisierten Industrie dadurch relevant bleiben können:
- Im Mittelpunkt stehen die einzigartige Perspektive und die emotionale Tiefe des menschlichen Erzählens.
- Konzentration auf Aufgaben, die KI derzeit nur schwer bewältigen kann, z. B. solche, die Einfühlungsvermögen, soziale Fähigkeiten und körperliche Geschicklichkeit erfordern.
- Anpassung an die neuen Technologien und deren Nutzung zur Verbesserung ihrer eigenen Arbeit.
Aber Block sagt, er mache sich keine Sorgen darüber, dass Menschen durch KI ersetzt werden könnten, zumindest im Moment.
"KI kann nicht von sich aus eine brillante und marktfähige Idee entwickeln", sagt er. "Selbst in einer Welt, in der die KI die Idee in eine Box eingeben kann und ein Film herauskommt, braucht man immer noch einen Menschen, der ihn macht und ihn sich ansieht und sagt: 'Das ist scheiße' oder 'Das ist großartig'.
"Und es ist dieser Prozess der Einbeziehung des Menschen, der die Arbeit wertvoll macht.
MASV Übertragung großer Dateien
Holen Sie sich 20 GB mit dem schnellsten und sichersten Dateiübertragungsdienst, den es derzeit gibt: MASV.