Kamera-Tracking (Matchmoving)

Kamera-Tracking (Matchmoving)

Kamera-Tracking, auch Matchmoving genannt, ist der Prozess, die Bewegung einer echten Kamera aus Filmmaterial zu rekonstruieren. Das Ziel ist es, eine virtuelle Kamera in einer 3D-Software zu erstellen, die sich genau so bewegt wie die echte Kamera. Diese virtuelle Kamera wird dann verwendet, um CG-Elemente zu rendern, die perfekt mit der Perspektive des Originalmaterials übereinstimmen. Ohne gutes Tracking werden CG-Elemente schweben, rutschen oder sich von der Szene losgelöst anfühlen.

Der Tracking-Prozess beginnt damit, dass Tracking-Markierungen im Filmmaterial platziert werden. Dies sind markante Punkte, denen die Software von Bild zu Bild folgen kann. Gute Tracking-Markierungen haben einen hohen Kontrast, wie ein dunkler Fleck auf einer weißen Wand, und sie sollten über das gesamte Bild verteilt sein. Moderne Tracking-Software kann mithilfe von Merkmalserkennungsalgorithmen Tausende von automatischen Tracking-Punkten generieren, die Ecken, Kanten und texturierte Bereiche finden.

Sobald die Punkte verfolgt sind, löst die Software die Kamerabewegung auf. Sie verwendet einen mathematischen Prozess namens Bündelausgleich, um für jedes Bild die Kameraposition und -rotation zu finden, die die Bewegung aller Tracking-Punkte am besten erklärt. Das Ergebnis wird durch den Lösungsfehler gemessen, der normalerweise in Pixeln angegeben wird. Eine gute Lösung hat einen Fehler von weniger als einem Pixel. Akzeptabel ist ein bis zwei Pixel. Alles darüber bedeutet, dass Ihr CG wahrscheinlich abdriften wird.

Es gibt mehrere Gründe, warum eine Lösung fehlschlagen könnte. Bewegungsunschärfe kann Tracking-Punkte verschwimmen lassen. Objektivverzerrung kann den Solver verwirren. Nicht genügend Parallaxe, was bedeutet, dass sich die Kamera nicht genug bewegt, um Tiefeninformationen zu erzeugen, kann dazu führen, dass der Solver die Szene falsch interpretiert. Manchmal müssen Sie Tracks manuell anpassen, schlechte entfernen oder Constraints wie bekannte Entfernungen hinzufügen, um dem Solver zu helfen.

Nach dem Lösen erhalten Sie eine 3D-Kamera und eine Punktwolke, die die verfolgte Szene darstellt. Die Punktwolke ist nützlich, um die Geometrie der Umgebung anzunähern. Sie können einfache Karten oder Geometrien über der Punktwolke erstellen, die als Platzhalter für Reflexionen und Schatten dienen. Der letzte Schritt besteht darin, die Lösung zu überprüfen, indem Sie ein einfaches Gitter oder einige Testobjekte durch die gelöste Kamera rendern und sie über das Filmmaterial compositen.