Seguimiento de cámara (Matchmoving)

Seguimiento de cámara (Matchmoving)

El seguimiento de cámara, también llamado matchmoving, es el proceso de reconstruir el movimiento de una cámara real a partir de un metraje. El objetivo es crear una cámara virtual en un software 3D que se mueva exactamente como lo hizo la cámara real. Esta cámara virtual se utiliza luego para renderizar elementos CG que coincidirán perfectamente con la perspectiva del metraje original. Sin un buen seguimiento, los elementos CG flotarán, se deslizarán o se sentirán desconectados de la escena.

El proceso de seguimiento comienza colocando marcadores de seguimiento en el metraje. Estos son puntos distintivos que el software puede seguir de fotograma a fotograma. Los buenos marcadores de seguimiento son de alto contraste, como una mancha oscura en una pared blanca, y deben estar distribuidos por todo el fotograma. El software de seguimiento moderno puede generar miles de puntos de seguimiento automáticos utilizando algoritmos de detección de características que encuentran esquinas, bordes y áreas texturizadas.

Una vez que los puntos son seguidos, el software resuelve el movimiento de la cámara. Utiliza un proceso matemático llamado bundle adjustment para encontrar la posición y rotación de la cámara para cada fotograma que mejor explique el movimiento de todos los puntos de seguimiento. El resultado se mide por el error de resolución, generalmente dado en píxeles. Una buena resolución tiene un error de menos de un píxel. Aceptable es de uno a dos píxeles. Cualquier cosa por encima significa que tu CG probablemente se desviará.

Hay varias razones por las que una resolución podría fallar. El desenfoque de movimiento puede difuminar los puntos de seguimiento. La distorsión de la lente puede confundir al solucionador. La falta de paralaje, lo que significa que la cámara no se mueve lo suficiente para crear información de profundidad, puede hacer que el solucionador malinterprete la escena. A veces necesitas ajustar manualmente las pistas, eliminar las malas o agregar restricciones como distancias conocidas para ayudar al solucionador.

Después de resolver, se obtiene una cámara 3D y una nube de puntos que representa la escena seguida. La nube de puntos es útil para aproximar la geometría del entorno. Puedes construir tarjetas simples o geometría sobre la nube de puntos para que actúen como marcadores de posición para reflejos y sombras. El paso final es verificar la resolución renderizando una cuadrícula simple o algunos objetos de prueba a través de la cámara resuelta y componiéndolos sobre el metraje.