KI-Relighting nach dem Dreh: wo es trägt und wo es bricht

«Das Licht richten wir in der Post» hat jetzt eine gemessene Antwort. Am 14. Oktober 2026 veröffentlichte ein Team der Hochschule der Medien Stuttgart in Frontiers in Communication eine peer-reviewte Untersuchung von drei KI-Relighting-Werkzeugen, mit gedrehtem Testmaterial und acht Lichtprofis, die die Ergebnisse bewerteten. In der Totale halten sie stand. An Haut, an feiner Textur und sobald sich etwas bewegt, brechen sie zusammen.

Bisher gab es zur Beurteilung dieses Versprechens nur Demos, die der Hersteller ausgesucht hatte. Diese Arbeit ändert das Ausgangsmaterial: tatsächlich gedrehte Einstellungen, ein Panel, das vom Ausleuchten lebt, und offengelegte Bewertungskriterien. Am selben Tag brachte Maxon ein KI-Lichtwerkzeug für After Effects heraus, das allerdings etwas anderes tut als die drei untersuchten.

Heraus kommt etwas, das in einer Produktionsbesprechung brauchbar ist: ein Kriterium nach Einstellungsgröße, nach Ausgangsmaterial und danach, wer das Licht abnimmt.

Eine Prüfung mit acht Profis im Raum

David Brenner, Katja Schmid und Jan Adamczyk ließen drei Werkzeuge auf fünf Testeinstellungen los und legten die Ergebnisse vier Kameraleuten, zwei Oberbeleuchtern und zwei Coloristen vor.

Die drei verfolgen unterschiedliche Ansätze. NVIDIA DiffusionRenderer ist quelloffen und wird über HDRI-Maps gesteuert: Du wählst Tageszeit und Himmel, nicht die Position des Führungslichts und nicht seine Formung. Eine Fahne oder eine Diffusion gibt es in einem HDRI nicht. Beeble Studio arbeitet lokal, bis 4K, und setzt virtuelle Lichter auf eine physikalische Schätzung der Szene. SwitchX, ebenfalls von Beeble, ist generativ: Es wird über ein Referenzbild geführt und läuft im Browser, mit 720p.

Auch die Einstellungen waren nicht zufällig gewählt. Zwei Außentotalen: eine im harten Gegenlicht, eine im tiefen Abendlicht, umgewandelt in Nacht. Zwei Over-Shoulder-Innenaufnahmen. Und eine Fahrradeinstellung, mit viel Bewegung und 35-mm-Korn.

Wo es funktioniert

Relighting trägt in Totalen und Establishern und bei Drehs, die durch Wetter, Zeitplan oder Budget eingeschränkt sind. Die Tag-Nacht-Umwandlung mit SwitchX wurde als überzeugend bewertet, wobei die Autoren sie als Einzelfall und nicht als allgemeine Schlussfolgerung darstellen.

Eine Anmerkung zum Vokabular, weil es täglich durcheinandergeht: Was diese Werkzeuge tun, ist keine Amerikanische Nacht. Die Amerikanische Nacht ist eine Aufnahmetechnik: man dreht bei Tag, unterbelichtet und schützt den Himmel. Hier geht es um eine Umwandlung in der Post, also genau um das, was sie ersetzen würde.

Der Nutzen ist zuerst wirtschaftlich, dann ästhetisch: Es lohnt sich bei Einstellungen, deren Wiederholung eine erneute Anfahrt mit Team und Drehtag bedeutet, nicht bei solchen, die man durch Umstellen einer Leuchte löst.

Wo es bricht

Die Fehler häufen sich dort, wo das Auge am wenigsten nachsichtig ist. Geglättete Haut, veränderte Gesichtszüge, vereinfachte Vegetation, Elemente, die ohne Grund auftauchen oder verschmelzen. In der Fahrradeinstellung, der mit der meisten Bewegung, trat Flackern auf.

Die Studie hält fest, dass keines der drei Werkzeuge das fotochemische Korn der 35-mm-Aufnahme erhielt. Das will sorgfältig gelesen werden, denn für sich genommen besagt es wenig: In jeder VFX-Kette wird entkörnt, sauber gearbeitet und am Ende mit Korn vom eigenen Negativ wieder aufgekörnt. Das ist Routine, keine Mauer.

Das eigentliche Problem liegt darunter. Das Modell nimmt nicht nur das Korn: Es nimmt die Mikrotextur mit, die darunter lag: Hautporen, die Bindung eines Stoffs, das Relief einer Wand. Die bringt kein Regrain zurück, und sie ist der Grund, warum eine neu ausgeleuchtete Einstellung eine Spur zu sauber wirkt.

Jedes Werkzeug versagt außerdem auf seine eigene Weise, und das prägt den Workflow:

• DiffusionRenderer bietet keine Vorschau: Jeder Versuch ist ein Blindrender.
• Beeble Studio ist das schnellste und interaktivste, bekam aber die schlechtesten Noten und eine Anmutung, die die Befragten als flach und digital beschrieben.
• SwitchX holte die besten Noten, dafür mit weniger berechenbarer Kontrolle: Es tauchen Gegenlichter und Reflexe auf, nach denen niemand gefragt hat.

Der Zielkonflikt ist der aus der Generativen bekannte. Berechenbare Kontrolle bei mäßigem Ergebnis, oder gutes Ergebnis bei wenig Kontrolle.

Maxons Scene Light tut etwas anderes

Am selben 14. Oktober veröffentlichte Maxon Red Giant 2027.0, und die meistbeachtete Neuerung war Scene Light, ein Effekt für After Effects. Es wurde berichtet, als bringe es KI-Relighting in den Schnittraum. Das trifft es nicht ganz, und der Unterschied zählt, wenn man ein Angebot schreibt.

Die drei Werkzeuge der Studie ersetzen die Beleuchtung: Sie schätzen den Aufbau der Szene und leuchten sie neu aus. Scene Light ist additiv. Es fügt Licht auf die vorhandene Einstellung hinzu, nimmt das ursprüngliche Licht aber nicht weg. Eine schlecht ausgeleuchtete Einstellung bleibt danach schlecht ausgeleuchtet.

Es schätzt per KI Tiefen- und Normalen-Maps aus dem Material, damit die hinzugefügten Lichter auf das Relief im Bild reagieren. Laut Maxon fallen sie hinter Objekte im Vordergrund und legen sich um Oberflächen, statt ein flaches Bild zu beleuchten.

Diese Beschreibung gehört eingegrenzt. Tiefe und Normalen, aus einer einzigen Kamera geschätzt, ergeben 2,5D: ein Relief, keine Geometrie. Es gibt Verdeckungsreihenfolge in Z und Shading-Reaktion auf allem, was zur Linse zeigt, aber keinen Schattenwurf auf eine andere Oberfläche, keine Indirekte, keine Glanzlichter von dem, was außerhalb des Bildes liegt. Am Set kommt das Licht zurück; hier moduliert es nur die sichtbaren Pixel. Aus demselben Grund wirkt Beeble flach.

Es nimmt Tiefen- und Normalen-Passes aus Cinema 4D oder Redshift an, und da liegt der eigentliche Nutzen. Wer sie exportiert, achte auf drei Dinge, sonst passt es nicht auf Anhieb: der Normalenraum und die Ausrichtung des Grünkanals, linear auf Near und Far gemappte Tiefe statt Szeneneinheiten, und Datenpasses ohne Filterung und Antialiasing gerendert, weil Kanten sonst Werte interpolieren, die es nicht gibt.

Zwei praktische Hinweise aus den Release Notes. Laut Maxon läuft die gesamte Verarbeitung lokal, was die Diskussion über vertrauliches Material erledigt. Und es gibt zwei bekannte Fehler: Die Kantenglättung funktioniert derzeit nicht, und die Schaltflächen für Punkt- und Spotlichter können After Effects einfrieren, wenn die Oberfläche nicht auf Englisch steht.

Der zweite wird falsch diagnostiziert: Er sieht nach Treiber- oder GPU-Problem aus und kostet einen Nachmittag. Wer auf Deutsch arbeitet, stellt die Oberfläche auf Englisch, bevor er den Effekt öffnet. Das verlangt allerdings einen Neustart und benennt die Effekte um, bricht also Expressions und Skripte, die sie über den lokalisierten Namen ansprechen.

Was sich ändert, wenn man auf den Kanaren dreht

Hier bestimmt das Licht den Drehplan, nicht umgekehrt. Die Calima, der Saharastaub, zieht am Vormittag auf und nimmt dem Rest des Tages den Kontrast; eine Außenaufnahme an der Küste liefert zu fast jeder Stunde hartes Gegenlicht; das Abendfenster schrumpft auf zwanzig brauchbare Minuten. Genau das Szenario, das die Studie als günstig markiert, denn das sind Drehs, die durch Wetter, Zeitplan oder Budget eingeschränkt sind.

In unserer Arbeit passt es zu Landschaft und großer Totale, wo das Stück vom offenen Bildausschnitt und von der Tageszeit lebt, und zu Archivmaterial, das vom selben Problem ausgeht: das Gedrehte erhalten und nur das Nötige ändern, mit der zusätzlichen Pflicht, festzuhalten, was angefasst wurde.

Bei Nahaufnahmen, Interviews und Testimonials setzen wir es nicht ein. Und Relighting kommt nicht in eine Einstellung, ohne dass die Kamerafrau oder der Kameramann sie abnimmt, auch wenn die Einstellung Monate nach dem Dreh angefasst wird.

Sechs Fragen, bevor man eine Einstellung zusagt

1. In welchem Farbraum und mit welcher Bittiefe geht es rein und raus? Diese Modelle arbeiten in Rec.709. Wer aus S-Log3, LogC oder ACEScg kommt, muss in beide Richtungen wandeln, sonst landet der Lichtabfall auf der falschen Kurve. Und wenn die einzige Quelle ein komprimierter 4:2:0-Master mit 8 Bit ist, lautet die Antwort nein.
2. In welcher Auflösung wird geliefert? Ein 720p-Werkzeug dient dazu, einen Look zu entscheiden, nicht zu liefern.
3. Passt der Anschluss zu den Nachbareinstellungen? Die Einstellung steht nicht allein: Sie liegt zwischen zweien, die am Drehtag ausgeleuchtet wurden. Eine neu auszuleuchten bricht den Anschluss zu beiden Seiten, und daran scheitern die meisten dieser Aufträge.
4. Beherrscht das Gesicht den Bildausschnitt? Wenn ja: physisches Licht.
5. Gibt es starke Bewegung? Genau dort tritt das Flackern auf. Einen Test verlangen: und ihn einkalkulieren: Das ist ein Arbeitstag.
6. Wer nimmt das Licht ab, und in welchem Raum? Das ist die Bedingung, die die befragten Profis selbst stellen.

Vom Erzeugen zum Verändern des Gedrehten

Die Stuttgarter Studie, Scene Light und ein Großteil dessen, was die Labore im Oktober veröffentlicht haben, weisen in dieselbe Richtung: vom gedrehten Material ausgehen und nur eine Ebene ändern. Die Demo besteht nicht mehr darin, die ganze Einstellung zu erzeugen, sondern ihr das Licht auszutauschen.

Für eine Produktionsfirma verlagert das Arbeit nach vorn, in den Drehplan. Vor der Abfahrt wird entschieden, was wirklich aufgenommen wird, was der Post überlassen bleibt und womit die Einstellung abgesichert ist, falls das Werkzeug nicht trägt. Wenn das Licht einer Einstellung später entschieden wird, gehört das auf den Tagesdispo und ins Budget, nicht in ein Gespräch.

KI ersetzt die Beleuchtung am Set nicht, dient aber als selektives Werkzeug zur Korrektur und Erweiterung und verlagert einige Lichtentscheidungen in die Postproduktion.

Das ist die Schlussfolgerung der Autoren. In Produktionssprache: Es rettet eine Einstellung, die sich nicht wiederholen lässt, es spart keinen Beleuchter ein.

Quellen

Geprüft zum 17. Oktober 2026:

• Brenner, D., Schmid, K. und Adamczyk, J., «AI-based relighting in moving images», Frontiers in Communication (14. Oktober 2026). Peer-reviewte Studie.
• Maxon, Release Notes zu Red Giant 2027.0.0 (14. Oktober 2026), einschließlich der bekannten Scene-Light-Fehler.
• Digital Production, «Maxon 2027.0: More Trees, Fewer Detours».

Wenn bei einem Projekt das Licht das Risiko ist (eine Außenaufnahme mit kurzem Fenster oder ein Archiv, das gerettet werden muss) setzt unser KI-VFX-Service genau dort an: bei dem, was schon auf der Karte liegt.