Die 47 kleinen VFX-Fixes: Welche Sie der KI geben sollten

Welche kleinen VFX-Fixes sollten bei einer fiktionalen Produktion an die KI gehen? Die, die oft vorkommen und jedes Mal ähnlich aussehen: dasselbe Objekt, ähnliches Licht, kein Gesicht. Einmalige Fixes und alles im Gesicht bleiben bei den Artists.

Davon gibt es viele. Die zweite Staffel von Severance kommt auf rund 3.500 VFX-Shots in zehn Folgen, und ihr Production VFX Supervisor Eric Leven von ILM sagt, jeder einzelne davon sei unsichtbar. „Das ist eine ganz andere Rechnung“, sagte er ILM, „denn niemand redet über sie.“ Im Folgenden steht, wie Sie entscheiden, welche davon ein Modell übernehmen sollte, und wo 47 gängige Typen landen.

Wann sich KI lohnt: viele Shots, die sich ähneln

In Dune haben die Fremen leuchtend blaue Augen, und jedes einzelne Paar entsteht erst nach dem Dreh. Beim ersten Film (2021) ließ Production VFX Supervisor Paul Lambert das noch von Hand machen: „Ich habe 260 Shots in Nuke von Hand rotoskopieren lassen.“ Dune: Part Two (2024) hatte mehr als 1.000 solcher Shots. Aus den 260 fertigen Shots gewann das Team 30.000 Augenpaare und trainierte damit in Nukes CopyCat ein eigenes Modell. Shots, bei denen das Modell danebenlag, wurden von Hand gemacht und flossen zurück ins Training. Foundry zufolge dauerte die Arbeit nur einen Bruchteil der Zeit.

Wiederholt hat sich eine einzige Aufgabe: dasselbe Blau auf derselben Art von Fläche, einem Auge, in tausend Shots. Weil der Fix jedes Mal ähnlich aussah, konnten die bereits fertigen Frames einem Modell beibringen, die nächsten zu erledigen.

Wo es aufhört: viele Shots, keiner wie der andere

Fallout zeigt die andere Seite. Der Ghoul hat keine Nase, und die musste in mehr als 500 Shots entfernt werden. FutureWorks erledigte die Arbeit 2023 für die erste Staffel, die 2024 Premiere hatte. Mit den damaligen Werkzeugen testete das Team einen Machine-Learning-Ansatz und verwarf ihn: Er hätte „uns nicht die Flexibilität gegeben, die wir für mehr als 500 Shots mit so unterschiedlichen Körperhaltungen, Umgebungen und Lichtsituationen gebraucht hätten“, sagte Production VFX Supervisor Jay Worth. Am Ende entstanden die Shots in 3D.

Der Fix wiederholte sich, aber keine zwei Shots sahen gleich aus. Jeder hatte einen anderen Kopfwinkel, anderes Licht und einen anderen Hintergrund. Die Werkzeuge sind seither besser geworden, aber bei Gesichtern behalten die Artists bei uns die Führung: Blut im Gesicht, Beauty- und Hautretusche, jeder Fix an einem Gesicht bei bewegter Kamera. Ein Modell kann dort helfen, trainiert auf den eigenen Frames des Artists für diese Sequenz, doch der Artist führt und stellt den Shot fertig.

Drei Fragen, bevor Sie einen Fix an die KI geben

1. Wie viele Shots dieses Typs gibt es?

Kommt ein Typ einmal vor, ist ein Artist schneller, als sich ein Modell aufsetzen und prüfen lässt. Kommt er über die Staffel verteilt vierzigmal vor, wird das Modell einmal aufgesetzt und für alle vierzig genutzt.

2. Wie ähnlich sind sie sich?

Gleiche Art von Fläche, ähnliches Licht und ähnlicher Winkel, kein Gesicht: Das Modell kann den Fix übernehmen, ein Artist prüft ihn. Kommen eine bewegte Kamera, Spiegelungen oder wechselndes Licht dazu, folgt das Modell nur der Bewegung oder malt eine erste Füllung, und der Artist stellt den Shot fertig. Gesichter und Körper in Bewegung gehen an den Artist.

3. Wie viel Verwaltung hängt an jedem Shot?

Auf einem typischen Status-Sheet ist jeder Shot eine eigene Zeile: Status, Dienstleister, Turnover-Datum, Version, Lieferdatum, Kosten. Hinter jeder Zeile stehen ein Angebot, eine Übergabe an den Dienstleister, ein Review, Anmerkungen und eine erneute Lieferung. Dieser Aufwand schrumpft kaum, wenn der Shot kleiner wird. Deshalb kostet eine lange Liste kleiner Fixes mehr, als die Arbeit im Bild vermuten lässt.

In unseren eigenen Kalkulationen braucht ein Artist für einen kleinen Fix wie ein Logo oder ein Nummernschild zwischen einem Viertel und einem halben Tag. Dazu kommt bei jedem Shot Zeit für Produktion, Koordination und Review, und bei einfachen Shots summiert sich das auf fast so viel wie die Zeit des Artists selbst.

Nehmen wir vierzig Nummernschilder, verteilt auf acht Folgen. Das sind zehn bis zwanzig Tage Artist-Arbeit. Einzeln abgewickelt sind es außerdem vierzig Zeilen, vierzig Übergaben und vierzig Review-Runden, jede mit eigener Koordination. Als ein Typ sortiert ist es ein Auftrag, mit einem Setup und einem abgestimmten Look, geprüft nach derselben Spezifikation. Jeder Shot wird weiterhin kontrolliert, aber die Koordination läuft einmal für das ganze Paket statt vierzigmal.

Die 47, sortiert

Hier sind die drei Fragen, angewendet auf 47 Typen kleiner Fixes, die auf den meisten Shotlisten fiktionaler Produktionen vorkommen, in sieben Gruppen. Jede Gruppe ist zweigeteilt.

KI-Durchlauf: Das Modell erledigt den Fix, ein Artist prüft ihn.

KI-gestützt: Das Modell übernimmt einen Teil, meist Tracking, die Matte oder eine erste Füllung, und ein Artist stellt den Shot fertig.

Was beim Artist bleibt, steht nach den Gruppen.

Freigaben: Marken, Namen und Rechte

Was vor der Kamera stand und nicht ins Bild darf.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 1Nummernschilder. Echte Kennzeichen, durch freigegebene ersetzt.
2. 2Logos auf Kleidung. Eine Marke auf Jacke oder Shirt. Framestore entfernte eines vom Fußballtrikot eines Darstellers, mit einem Modell, das auf vier gemalten Frames trainiert war.
3. 3Logos auf Produkten. Becher, Flaschen, Verpackungen auf dem Tisch.
4. 4Markennamen an Ladenfronten. Eine echte Kette hinter der Szene.
5. 5Plakate und Werbetafeln. Nicht freigegebene Werbung an Wänden und Wartehäuschen.
6. 6Kunst an Wänden. Bilder und Graffiti ohne Freigabe.
7. 7Echte Adressen. Hausnummern, Straßennamen, Telefonnummern auf Lieferwagen.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 8Passanten ohne Freigabe. Menschen im Hintergrund, unscharf gemacht oder ersetzt.

Epoche: die Gegenwart entfernen

Für jede Geschichte, die vor etwa 1995 spielt, muss die moderne Straße weg.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 9Satellitenschüsseln.
2. 10Klimaanlagen und Überwachungskameras an Fassaden.
3. 11Antennen und Solarmodule auf Dächern.
4. 12Moderne Straßenlaternen.
5. 13Fahrbahnmarkierungen und moderne Verkehrsschilder.
6. 14Ladenschilder, an die Epoche angepasst. Das Paar auf dem Cover ist eines davon.
7. 15Kondensstreifen und Flugzeuge am Himmel.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 16Moderne Autos, die im Hintergrund parken.
2. 17Kunststofffenster und moderne Türen. Geometrie und Spiegelungen machen sie schwieriger.

Das Team im Bild

Ausrüstung, die nie zu sehen sein sollte.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 18Tonangel, die oben ins Bild ragt.
2. 19Schatten der Tonangel auf einer Wand. Im Gesicht geht er an den Artist.
3. 20Lichtstative und Flags am Bildrand.
4. 21Dolly-Schienen und Kameramarkierungen am Boden.
5. 22Klebemarken auf dem Boden.
6. 23Tracking-Marker auf Greenscreens und Set-Teilen.
7. 24Drähte und Rigs vor Himmel oder glatten Wänden.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 25Team und Kamera als Spiegelung in Fenstern, Spiegeln und Autolack.

Waffen und Action

Effekte, die am Set weder sicher noch günstig zu machen sind.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 26Mündungsfeuer. Requisitenwaffen feuern nicht, also kommt das Feuer später dazu.
2. 27Patronenhülsen, die aus der Waffe fliegen.
3. 28Einschüsse in Wänden und Möbeln, ohne Squibs.
4. 29Funken und Querschläger.
5. 30Staub und Trümmer bei Einschlägen.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 31Splitterndes Glas.
2. 32Bluttreffer auf Kleidung. Blut im Gesicht bleibt beim Artist.

Wetter und Atmosphäre

Das Wetter, das am Drehtag nicht kam.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 33Himmel ersetzen bei statischen oder langsamen Shots.
2. 34Nebel und Dunst als Ebenen.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 35Himmel ersetzen bei bewegter Kamera.
2. 36Regen, ergänzt oder verstärkt.
3. 37Schnee am Boden und in der Luft. Severance ergänzte ihn in fast jeder Außenszene.
4. 38Atemdampf in kalten Szenen, die bei Wärme gedreht wurden.
5. 39Nasse Straßen für eine trocken gedrehte Szene.

Screens und Inserts

Alles, worauf Text oder ein Bild zu sehen ist.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 40Zeitungen, Briefe und Dokumente mit fiktivem Text.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 41Handydisplays. Das Modell trackt den Screen, der Artist setzt das Insert und seine Spiegelungen.
2. 42Laptop- und Monitordisplays.
3. 43Fernseher im Hintergrund.
4. 44Blendungen und Spiegelungen auf Displays.

Continuity und Clean-up

Die Fixes, die aus dem Schnitt kommen.

KI-Durchlauf · ein Modell erledigt den Fix, ein Artist prüft ihn

1. 45Flackern, Sensorstaub und tote Pixel.

KI-gestützt · ein Modell trackt oder füllt, ein Artist stellt fertig

1. 46Requisiten-Continuity. Der Füllstand im Glas, die Länge einer Zigarette.
2. 47Tattoos auf Armen und Körper, für eine Rolle abgedeckt.

Was beim Artist bleibt

Nicht unter den 47, weil sich keine zwei dieser Shots ähneln:

• Bluttreffer und Wunden im Gesicht.
• Beauty- und Hautretusche.
• Veränderte Anatomie, wie die Nase des Ghouls.
• Jeder Fix an einem Gesicht bei bewegter Kamera.

Die Liste bei Ihrer nächsten Produktion nutzen

Zählen Sie Ihre Liste nach Typ

Postlisten sind nach Folgen sortiert, weil der Schnitt sie so übergibt. Sortieren Sie Ihre nach den 47 Typen. Kommt ein Typ fünfzigmal vor, behandeln Sie ihn als einen Auftrag.

Markieren Sie jeden Typ

Setzen Sie die Markierung neben jeden Typ: KI-Durchlauf, KI-gestützt oder Artist. Jeder Dienstleister sollte sagen können, welche Ihrer Shots er keinem Modell geben würde.

Bleiben Sie bei einem Prüfstandard

Ein Shot, der mit einem Modell entstanden ist, durchläuft dasselbe Review wie jeder andere, beim selben Supervisor, nach derselben Lieferspezifikation.

Bei The Difference Machine gehört die Arbeit an kleinen Shots zu unseren Leistungen, und ein Artist stellt jeden Shot fertig. Wenn Sie eine zweite Meinung dazu möchten, welche Ihrer 47 an ein Modell gehen und welche nicht, ist das genau das Gespräch, das wir führen, bevor irgendetwas generiert wird.

Die Fixes bleiben unsichtbar

Das Severance-Team wird nicht über seine 3.500 Shots reden, und über Ihre wird auch niemand reden. Kürzer wird die Liste auch nicht. Was sich ändert, sind die Kosten jeder Zeile: Wo sich derselbe Fix hundertmal wiederholt, muss er nicht mehr hundertmal von Hand gemacht werden.