トラッキングのための高解像度録画とダウンスケーリング

トラッキングのための高解像度録画とダウンスケーリング

カメラトラッキングにおける最もよく守られた秘密の一つは、最終的な納品が標準HDであっても、常に可能な限り最高の解像度で撮影すべきだということです。4K、5K、さらには6Kで録画し、トラッキング前にHDにダウンスケーリングすると、劇的に優れた結果が得られます。その理由は単純な数学です。ピクセルが多いほどトラッカーが捉える詳細が増え、ダウンスケーリングによってノイズが平均化されます。

トラッキングアルゴリズムが追跡する特徴を探すとき、識別可能なピクセルのパターンが必要です。高解像度の画像は、フレームのすべての部分により多くのテクスチャと詳細を持っています。つまり、トラッカーはより多くのトラッキングポイントを見つけ、より正確に追跡できます。HD解像度では滑らかで特徴がないように見える同じ表面でも、4Kではトラッカーが機能するのに十分な詳細があるかもしれません。

ダウンスケーリングにはノイズ除去効果があります。4K画像をHDに縮小すると、各出力ピクセルは4つの入力ピクセルの平均になります。この平均化によりランダムノイズが平滑化され、画像がよりクリーンになります。クリーンな画像はクリーンなトラッキングを意味します。トラッキングポイントはフレーム間でより安定し、ジッターが少なくなります。これにより、残差誤差が少なく、よりスムーズなカメラソルブが得られます。

レンズ歪みにも別の利点があります。高解像度の映像は、キャリブレーショングリッドのデータポイントが多いため、より正確なレンズ歪みプロファイルが得られます。歪み補正がより正確になり、トラッキングソルブがさらに向上します。これは、すべてのステップが最初の余分な解像度の恩恵を受ける連鎖効果です。

唯一の欠点は、ストレージと処理時間です。4K映像はより多くのスペースを占有し、処理に時間がかかります。しかし、現代のストレージと処理能力では、これが重大な問題になることはほとんどありません。多くのVFXスタジオでは、すべてを4K以上で撮影し、パイプラインの標準的な部分として作業解像度にダウンスケーリングしています。重要なトラッキングショットでは、追加のオーバーヘッドをかける価値は十分にあります。