Was ist die VFX-Pipeline?

Was ist die VFX-Pipeline?

Die VFX-Pipeline gliedert die Schritte eines Visual-Effects-Workflows für Film-, Fernseh- und digitale Medienprojekte. Sie organisiert den gesamten VFX-Prozess und ermöglicht es jedem, seine Rolle zu kennen und zu wissen, wie sie sich in den Produktionszeitplan einfügt. Vom Storyboarding und Referenzbildern bis hin zu Modellierung, Rotoscoping, Komposition und Beleuchtung (um nur einige zu nennen).

Bei kleineren Produktionen kann ein einziger VFX-Künstler den gesamten Arbeitsablauf übernehmen, aber die meisten Produktionen arbeiten mit Teams von spezialisierten Künstlern.

Die Pipeline bringt ein gewisses Maß an Vernunft in einen Prozess, der normalerweise nicht völlig linear verläuft. Die Mitglieder des VFX-Prozesses werden oft in die Vorproduktions-, Produktions- und Postproduktionsphasen einbezogen.

Um ihre beste Arbeit zu leisten (und um sicherzustellen, dass sie nicht gebeten werden, verschiedene Schritte zu wiederholen), sollten Künstler jeden Schritt der VFX-Workflow-Pipeline verstehen und schätzen.

💡 Lesen Sie mehr: Wie Stimulated Inc. Bewegt 6K Immersives VFX-Material für Bühnenshows

VFX-Pipeline-Diagramm

⬇️ Herunterladen PDF-Version Das VFX-Pipeline-Diagramm

Der VFX-Arbeitsablauf

Bei der Frage "Was bedeutet VFX im Schnitt?" ist es wichtig zu verstehen, dass keine zwei realen VFX-Pipeline-Workflows identisch sind. In unserer VFX-Roadmap unten haben wir diese Schritte in die Phasen Vorproduktion, Produktion und Postproduktion unterteilt, aber Viele der unten aufgeführten Schritte laufen im Laufe des Projekts oft parallel ab.

Vorproduktion

Ein großer Teil des Arbeitsablaufs für visuelle Effekte in der Vorproduktion ist planungsbezogen, was dazu beiträgt, die Crews auf dem Laufenden zu halten, während sie sich auf alle technischen Anforderungen oder potenzielle Ausführungsprobleme vorbereiten. VFX-Künstler, die sich in der Planungsphase befinden, können sich VFX Schussliste Vorlagen um bei der Planung der Aufnahmen und Szenen, die visuelle Effekte benötigen, Zeit zu sparen.

1. Forschung und Entwicklung (F&E)

An der Forschung und Entwicklung eines Videoprojekts sind in erster Linie die Technischen Direktoren (TD) beteiligt, die mit den VFX-Supervisoren zusammenarbeiten, um den technischen Ansatz zu planen und zu bestimmen, welche Aufnahmen und Effekte technisch machbar sind. Bei extrem VFX-lastigen Projekten können auch externe Wissenschaftler, Ingenieure oder Mathematiker zur weiteren Beratung hinzugezogen werden.

TDs müssen sicherstellen, dass alle Software und Dateien, die in der VFX-Pipeline verwendet werden, kompatibel sind, und erstellen manchmal eigene Software und Plug-Ins, um die Effizienz der VFX-Pipeline zu verbessern.

Der größte Teil der F&E-Phase wird während der gesamten Laufzeit eines Projekts fortgesetzt, da das Material optimiert wird und sich die Konzepte weiterentwickeln.

2. Storyboarding und Animationen

Storyboarding Hier erstellt das VFX-Team visuelle Darstellungen aller Aktionen im Drehbuch. Die Bewegungen der Charaktere und die Einstellungen der Geschichte werden analysiert, und es werden grundlegende Zeichnungen erstellt, um das gewünschte Framing für jede einzelne Einstellung zu veranschaulichen.

Wie die meisten Planungselemente ist jedoch auch das Storyboarding nicht endgültig. Es geht eher darum, einen Grundstein zu legen und den VFX-Künstlern eine solide Vorstellung davon zu geben, was das Redaktionsteam will.

3. Vor-Visualisierung

Bei der Previsualisierung, auch Previs genannt, werden mithilfe von Storyboards Low-Poly-3D-Modelle, Wireframes und Szenendarstellungen erstellt, die als Stellvertreter für die späteren visuellen Effekte dienen. Previs findet in der Regel zusammen mit anderen Mitgliedern des Kreativteams statt, um Kamerawinkel zu bestimmen, Drehorte festzulegen und komplexe Szenen zu planen.

Weitere VFX-Schritte in der Vorproduktionsphase können Konzept- und Kunstdesign sein, die künstlerische Konzepte weiter verfeinern und vollständige Bilder zur Definition von Charakteren, Einstellungen und Requisiten erstellen.

Das Layout (auch Produktionsdesign genannt) legt, wie der Name schon sagt, fest, wie die endgültigen Kulissen aussehen sollen, und gibt den Entwicklern von physischen oder digitalen Kulissen eine Anleitung.

Produktion

Zu diesem Zeitpunkt kommt der VFX-Workflow erst richtig in Schwung, denn dann finden die meisten Dreharbeiten statt, Video-Rohdateien erstellt und VFX-Dailies eingereicht werden. Aber viele VFX-Aufgaben können parallel zum Produktionsprozess erledigt werden.

4. 3D-Modellierung

Die 3D-Modellierung findet in allen drei Produktionsphasen statt, aber in der Produktionsphase verwandeln die Künstler Storyboard-Kunstwerke oder Low-Poly-3D-Modelle in lebensechte Darstellungen. Die meisten 3D-Modellierungen ist der Erstellung von Objekten wie Fahrzeugen oder Gebäuden gewidmet, die entweder nicht praktisch oder kosteneffektiv am Set eingesetzt werden können. 3D-Modelle werden aber auch zur Erstellung von Charakteren (zur Darstellung von Nicht-Menschen oder als digitale Doppelgänger) und anderen Requisiten verwendet.

Während 3D-Modelle von unpraktischen Dingen wie Raumschiffen oder dem Batmobil visuell am interessantesten sind, ersetzen oder ergänzen 3D-Modellierer auch physische Objekte, die am Set gedreht wurden und Verbesserungen bei Beleuchtung, Schatten oder Textur benötigen.

Die 3D-Modellierung ist eine der wichtigsten zeitaufwendig und arbeitsintensiv Elemente der VFX-Pipeline und hängt oft von Referenzfotos ab, die während der Produktion aufgenommen werden. Die 3D-Modelle, die sich bewegen, müssen geriggt und animiert werden, aber dazu später mehr.

5. Matte Malerei

Matte Painting ist eine der ältesten VFX-Techniken überhaupt und beinhaltet die Erstellung visueller Hintergründe, die nicht existieren. Heutzutage werden solche Hintergründe oft digital mit LED-Panels und Game-Engines erstellt, oft als ganze 3D-Sets für virtuelle Produktionoder durch Chroma-Keying mit einem grünen oder blauen Bildschirm.

Vor Jahren wurden für die Mattmalerei ausschließlich Fotografien und bemalte Glasplatten verwendet (matte Farbe wurde verwendet, weil sie das Licht nicht reflektiert).

Aber Matte Painting wird immer noch in vielen Produktionen verwendet - einschließlich der Harry Potter-Filme, Game of Thrones und The Witcher - teilweise, weil man damit Geld sparen kann. Aber die Möglichkeiten sind ziemlich begrenzt: Matte Paintings können ihre Beleuchtung, Kamerawinkel oder andere Elemente nicht ändern.

6. Referenzfotografie

Während der gesamten Produktionsphase halten sich Mitglieder des VFX-Teams am Set auf, um Referenzfotos von Schauspielern, Szenen, Requisiten und allem anderen wichtigen Material zu machen. Diese Fotos werden dann für das Rigging, die Animation und das Hinzufügen von Texturen zu 3D-Modellen verwendet.

💡 Lesen Sie mehr: Übertragung großer Dateien für Postproduktions-Teams

Postproduktion

In der Postproduktion werden alle Elemente einer Videoproduktion - VFX, Filmmaterial, Musik und Ton - zum fertigen Produkt zusammengeführt. Wie wir gesehen haben, ist das VFX-Team während des gesamten Produktionszyklus beschäftigt, aber die VFX-Postproduktion ist die arbeitsintensivste Phase des gesamten Prozesses für das VFX-Team.

7. Rigging und Animation

Stellen Sie sich vor, was passiert, wenn ein Puppenspieler an den Fäden einer Marionette zieht, und Sie haben bereits eine ziemlich gute Vorstellung davon, worum es beim Rigging und bei der Animation geht - nur auf digitaler Ebene. Rigging und Animation hauchen 3D-Modellen Leben ein, indem sie ein System von Steuerelementen aufbauen, mit denen Animatoren diese Objekte manipulieren können.

Rigging-Teams stützen sich oft auf Referenzfotos, aber auch Motion-Capture-Kameras oder Anzüge werden häufig eingesetzt, um Bewegungsdaten zu erfassen, die den Rigging- und Animationsprozess unterstützen.

Rigging-Teams gehen oft so weit, dass sie unter anderem Hautgewichte berechnen und digitale Skelette und Muskeln in 3D-Charaktere einfügen, um natürliche Bewegungen nachzubilden.

8. FX und Simulation

Die Effektkünstler sind für die Erstellung von Konzepten und Szenen verantwortlich, die sich nach den Gesetzen der Physik bewegen und reagieren, wie z. B. eine Totale einer wütenden Schlacht auf See oder im Weltraum - mit feurigen Explosionen, die in Wirklichkeit kann nicht im Weltraum existierenaber egal - sie sehen cool aus. Effektkünstler arbeiten oft mit Elementen wie Feuer, Rauch, Flüssigkeiten und sogar Partikeln.

Die Effektkünstler arbeiten mit den Animatoren zusammen, um sicherzustellen, dass diese simulierten Elemente nicht (unangenehm) auffallen und gleichzeitig so natürlich wie möglich aussehen und wirken.

9. Bewegungsverfolgung/Match Moving

Motion Tracking, auch bekannt als Matchmoving, ermöglicht es VFX-Künstlern (in diesem Zusammenhang als Matchmove-Künstler bezeichnet), Effekte in bewegte Szenen und Live-Action-Material einzufügen, ohne dass das Ganze schlecht aussieht.

Schließlich ist das Einfügen von VFX-Elementen in eine statische Aufnahme alles in allem relativ einfach - aber das Hinzufügen derselben Elemente zu einer Kamerabewegung beinhaltet viel mehr Variablen. Deshalb berücksichtigt Motion Tracking die Positionierung, die Ausrichtung, den Maßstab und die Art und Weise, wie sich das Objekt innerhalb der Aufnahme bewegt, einschließlich der Nachbildung physischer Kamerabewegungen mit virtuellen Kameras in ihrer Motion-Tracking-Software.

10. Texturierung

Der Texturierungsprozess ist ziemlich genau so, wie er klingt: Es fügt den Oberflächen von 3D-Modellen Texturen hinzu. Die Textur kann alles umfassen, von der Oberflächenfarbe über die schuppige Haut eines Reptils bis hin zu Reflexionen im Wasser, metallischem Glanz oder Kratzern auf einer Autotür. So wird sichergestellt, dass die Modelle so realistisch wie möglich aussehen.

11. Rotoscoping und Maskierung

Beim Rotoscoping werden Objekte oder Figuren aus dem Originalmaterial herausgeschnitten, um die ausgeschnittenen Bilder vor einem anderen Hintergrund oder Kontext zu verwenden.

Das Rotoscoping war in der Regel ein relativ mühsamer und manueller Prozess, vor allem in den Tagen vor der Computerisierung von VFX.

"Ein legendäres Beispiel für manuelles Rotoscoping gab es bei Alfred Hitchcocks Die Vögel, als die Filmcrews Vögel in der Natur filmten und sie in jede Einstellung rotoscopierten. Es dauerte drei Monate, um Hunderte von Vögeln, einen nach dem anderen, in einer einzigen Einstellung zu rotoskopieren."

Heutzutage führen VFX-Künstler immer noch manuelles Rotoscoping durch, aber neue Tools wie Runway, die die maschinelles Lernenhaben dazu beigetragen, den Prozess drastisch zu beschleunigen.

Der gesamte Rotoskopie- und Maskierungsprozess kann durch Chroma-Keying vermieden werden, bei dem, wie bereits erwähnt, Vordergrundmotive vor einem leicht entfernbaren Hintergrund (wie einem Greenscreen) aufgenommen werden. In vielen Fällen ist jedoch auch das Rotoskopieren erforderlich, um einen perfekten Ausschnitt zu erstellen.

12. Beleuchtung und Rendering

Die Beleuchtung wird in der Regel behandelt, nachdem die Texturkünstler ihre Arbeit getan haben. Es ist das letzte Element, das angewendet wird, bevor der Effekt oder das computergenerierte Bild (CGI) fertig ist. Das Hinzufügen und Anpassen von virtueller Beleuchtung und Schatten an statische oder computergenerierte Live-Action-Szenen oder -Charaktere trägt wie die Texturierung dazu bei, dass diese realistischer aussehen und gleichzeitig Aspekte der Originalaufnahme wie Farbe und Intensität verbessert werden.

Genau wie bei der realen Beleuchtung müssen die virtuellen Lichter jedoch strategisch in einer Szene platziert werden. Beleuchtungskünstler verwenden Werkzeuge wie Shader-Einstellungen und Beleuchtungskarten um dies zu erreichen, indem wir Spot-, Flächen- und Richtungslicht so positionieren, dass es den Winkeln und Schatten des Originalfilmmaterials entspricht.

Nach der Beleuchtung wird die gesamte Szene an das Compositing übergeben.

13. Compositing

Compositing, manchmal auch Stitching genannt, ist der letzte Schritt des VFX-Workflows in der Postproduktion. Es ist der letzte Schritt in der VFX-Roadmap, sie ist auch die wichtigste weil es alle verschiedenen VFX-Elemente mit dem realen Filmmaterial zu einer fertigen Aufnahme oder Szene zusammenfügt.

Ein schlechtes Compositing kann all Ihre ansonsten großartige VFX-Arbeit bis zu diesem Punkt ruinieren - es ist also entscheidend, es richtig zu machen.

Bei diesem Prozess sammelt ein Compositor alle Inhalte - einschließlich Live-Action-Filmmaterial, Renderings, VFX-Platten und Mattepaintings - und fügt sie in Vorbereitung auf den nächsten Schritt in der Postproduktionspipeline (in der Regel die Farbgebung) zusammen. Bei manchen Aufnahmen müssen nur einige wenige Elemente kombiniert werden, bei anderen wiederum müssen Dutzende von Elementen überlagert werden, während gleichzeitig Beleuchtung, Reflexionen, Schatten und Atmosphären angepasst werden, um ein nahtloses Erscheinungsbild zu erreichen.

💡 Lesen Sie mehr: Verwendung von MASV zur Bereitstellung von 4K 360° Driving Plates für VFX

VFX-Werkzeuge und Software

VFX gewinnt in der modernen Videoproduktionsbranche immer mehr an Bedeutung - in der ersten Staffel von Amazons Die Ringe der Macht wurden mehr als 1.500 VFX-Künstler aus 20 Studios eingesetzt.

Aber welche Art von Software und VFX-Systemen verwenden branchenführende VFX-Künstler, um ihren Zauber zu entfalten?

Hier sind einige Beispiele.

After Effects

After Effects gilt als eine der besten, wenn nicht die beste VFX-Software überhaupt. Das liegt zum Teil daran, dass sie sich nahtlos in die Adobes Premiere Pro Videobearbeitungssoftware und Tools für die Zusammenarbeit wie z. B. Frame.iosondern auch, weil es verdammt gut ist in dem, was es tut.

After Effects bietet außerdem zahlreiche anpassbare VFX-Vorlagen von Drittanbietern, die Sie herunterladen können, um Ihr Projekt zu skalieren.

Fusion

Fusion von Blackmagic Design ist ein großartiges Werkzeug zur Erstellung von immersive 360- oder VR-Videosstereoskopische 3D-Effekte und das Compositing von 3D-Modellen und realem Live-Action-Material. Es ist Bestandteil der Videobearbeitungssoftware DaVinci Resolve und wurde für die Erstellung von VFX-Szenen in Filmen verwendet, z. B. Wächter der Galaxis und die Hungerspiele und sogar Filmsequenzen für Videospiele wie Halo 5.

Nuke

Nuklearwaffe der Gießerei ist eine VFX- und Filmbearbeitungssoftware, die von bedeutenden Unternehmen der Branche wie Walt Disney Animation Studios, Blizzard Entertainment, Sony Pictures Animation und DreamWorks Animation verwendet wird und bei Produktionen von Die Krone zu Boardwalk Empire. Es bietet nahtlose Überprüfungsworkflows und die Möglichkeit, VFX-Elemente zu dynamischen redaktionellen Zeitplänen hinzuzufügen.

Houdini

Houdini von SideFX wird im F&E-Prozess und an anderen Stellen eingesetzt, um maßgeschneiderte Effekte zu entwickeln. Es integriert Animationsdesign, Effekt-Rendering und Charaktermodellierung und bietet eine Vielzahl von VFX-Simulationsmodulen für Flüssigkeiten, Menschenmengen, Körner und andere Elemente wie Zerstörung und Pyroeffekte. Houdini lässt sich auch mit anderer Software wie Maya integrieren.

Maya

Autodesk's Maya bietet 3D-Animation und -Modellierung, Simulationen und ultra-realistisches Rendering. Beleuchter verwenden es häufig, um virtuelle Beleuchtung zu erstellen und zu platzieren, und 3D-Modellierer, um animierte Charaktere oder andere Objekte zu erstellen und auszurüsten. Obwohl die Software von Rezensenten als schwierig zu bedienen beschrieben wurde, deckt sie verschiedene Elemente der VFX-Pipeline ab, darunter dynamische Simulationen, Texturierung und Animation.

HitFilm Pro

HitFilm Pro (und seine kostenlose Version für den Verbrauchermarkt, HitFilm Express) ist ein All-in-One-Tool für VFX und Videobearbeitung, mit dem VFX-Künstler Effekte auf die NLE-Timeline anwenden können (anstatt sie zu verlegen). Die App enthält fast 1.000 VFX-Vorlagen und Presets mit Funktionen wie Maskierung, 2D- und 3D-Motion-Tracking, Green-Screen-Keying und Partikel-Simulatoren.

Blender

Blender von Blender Foundation ist eine leistungsstarke Open-Source-Freeware, die sich perfekt für VFX-Einsteiger eignet, die das Handwerk erlernen möchten, ohne Tausende von Dollar für andere Alternativen auszugeben (viele davon wurden bereits erwähnt). Die 3D-Animationstools umfassen einen Kamera- und Objekt-Tracker, der manuelles oder automatisches Tracking, Kamerarekonstruktion und Echtzeit-Vorschauen bietet.

Tipps und bewährte Praktiken für hochwertiges Bildmaterial

• Ständige Kommunikation mit verschiedenen Kreativteams, nicht nur mit anderen VFX-Künstlern, sondern auch mit Videoeditoren, Koloristen, dem Produktionsteam vor Ort, dem Regisseur usw.
• Kennen Sie die verschiedenen VFX-Systeme (Tools, Prozesse, Software usw.) des gesamten VFX-Workflows in- und auswendig, bevor Sie ein monatelanges Projekt in Angriff nehmen.
• Bei der virtuellen Produktion müssen sich die VFX-Künstler darüber im Klaren sein, dass das, was auf Workstations gut aussieht, auf einer riesigen LED-Wand nicht unbedingt gut aussieht. Unreal Engine empfiehlt ihren In-Camera VFX Production Test, um empfohlene Konfigurationen für virtuelle Bühnen zu sehen.
• Ersetzen Sie physische Objekte (Brände, Schlaglöcher, Reifenspuren usw.) durch VFX-Renderings, um eine Menge Geld zu sparen, anstatt dasselbe in der physischen Welt nachzubilden oder bestimmte Szenen noch einmal drehen zu müssen, um alles perfekt zu machen.
• Netflix empfiehlt VFX-Künstlern, die von zu Hause aus arbeiten, virtuelle Desktop-Lösungen wie HP RGS oder Teradici, einen einzelnen Monitor mit einer Auflösung von 1920×1200 als Basisauflösung sowie eine dedizierte Bandbreite und Verbindungen mit niedriger Latenz.
• Befolgen Sie stets ordnungsgemäße Dateibenennungskonventionen.

Ressourcen für weiteres Lernen und Entwicklung

Hier finden Sie einige weitere VFX-Leitfäden, die Ihnen helfen, noch mehr Einblicke in VFX-Pipelines und Best Practices zu gewinnen:

• Netflix VFX Best Practices
• Unreal Engine In-Camera VFX Best Practices
• Wie diese kostenlosen oder erschwinglichen VFX-Tools Ihr Storytelling inspirieren können
• Was ist Compositing? VFX-Compositing-Techniken erklärt
• VFX: Wie man einen Greenscreen wie ein Profi in 4 einfachen Schritten benutzt
• Wie integrieren Sie visuelle Effekte in Ihr Produktionsdesign?