L’intelligenza artificiale e le reti neurali hanno aiutato un utente di Reddit a trasformare un vecchio film in una risoluzione 4K con 60 fps.
Una delle clip più famose della storia del cinema è il cortometraggio “L’Arrivée d’un train à La Ciotat” (o L’arrivo di un treno alla stazione La Ciotat), un video di poco più di 50 secondi realizzato dal Fratelli Lumière. Registrato originariamente nel 1896, come puoi immaginare, le fotocamere dell’epoca non catturavano il suono, quindi avere l’immagine in movimento era già un’impresa. Ora puoi vedere questo film in 4K a 60 fps.
L’intelligenza artificiale ha riempito i pixel per aumentare la risoluzione a 4K
Un utente di Reddit, Denis Shiryaev ha deciso di farlo Ottimizzare il classico con l’aiuto della tecnologia. Ha iniziato a ridimensionare la risoluzione dell’immagine a 4K con uno strumento denominato AI Gigapixel di Topaz Labs.
Questo strumento consente di generare pixel in modo da aumentare le dimensioni dell’immagine originale per ottenere una risoluzione più alta con il massimo dettaglio possibile. Puoi vedere il video originale qui sotto:
Oltre a migliorare la risoluzione, è riuscito ad aumentare anche il frame rate. Qualcosa che renda l’output più fluido.
Come puoi vedere, il movimento del treno e le persone che camminano sulla scena sembrano perfettamente fluidi. Non c’è quasi nessuna interruzione di movimento, il che lo rende completamente diverso dall’originale. L’intelligenza artificiale viene utilizzata qui per riempire i fotogrammi extra, quindi il risultato finale è assolutamente ipnotico.
Per questo, Shiryaev ha utilizzato uno strumento chiamato DAIN, che esegue una serie di lavorazioni super complesse che riempiono quei buchi inesistenti con immagini perfettamente sincronizzate con il resto del film.
Per ottenere ciò, analizzare lo strumento analizza le immagini al fine di rilevare il flusso visivo della scena, il contesto e la profondità di essa. Quindi genera una mappa di calore che finisce per creare l’immagine perfetta per la cornice.
E poi ha aggiunto i suoni come tocco finale.
