Denoising AI

Denoising AI

Il denoising AI utilizza modelli di machine learning addestrati su milioni di coppie di immagini per rimuovere il rumore dai render. Invece di utilizzare filtri matematici come i denoiser tradizionali, i denoiser AI hanno imparato come appaiono le immagini pulite e possono ricostruire l'immagine pulita da un input rumoroso con notevole accuratezza. I risultati sono spesso molto migliori rispetto al denoising tradizionale, specialmente per immagini molto rumorose.

Il processo di addestramento funziona prendendo render puliti con un alto numero di campioni e aggiungendo rumore artificiale per creare versioni rumorose. Il modello AI impara a prevedere l'immagine pulita da quella rumorosa. Su milioni di esempi, il modello sviluppa una comprensione di quali tipi di pattern sono dettagli reali e quali sono rumore. Questo gli permette di rimuovere il rumore preservando i dettagli fini che i filtri tradizionali sfocherebbero.

Il denoiser OptiX di Nvidia è il denoiser AI più utilizzato nel VFX. Funziona su GPU Nvidia e può denoizzare un fotogramma in millisecondi. OptiX utilizza il beauty pass insieme a pass ausiliari come normali e albedo per guidare il denoising. I risultati sono impressionanti, spesso producendo immagini pulite da render con pochissimi campioni. Molti renderer hanno il supporto integrato per OptiX.

Il denoising AI non è perfetto. A volte può allucinare dettagli che non erano nel render originale, creando pattern che sembrano plausibili ma non sono effettivamente corretti. Questo è chiamato artefatto AI. Per i fotogrammi finali, è più sicuro renderizzare abbastanza campioni in modo che il denoiser AI debba solo fare una leggera pulizia. Per lo sviluppo del look e le anteprime, il denoising AI è un punto di svolta perché permette di vedere un risultato pulito quasi istantaneamente.

Il futuro del denoising è basato sull'AI. Man mano che i modelli migliorano e l'hardware diventa più veloce, i denoiser AI diventeranno lo standard sia per l'anteprima che per il rendering dei fotogrammi finali. Alcuni renderer stanno già sperimentando il rendering neurale, dove l'AI non solo denoizza ma genera effettivamente parti dell'immagine. Per ora, il denoising AI è uno strumento essenziale che ogni artista VFX dovrebbe comprendere e utilizzare.