La colorazione o l’aggiunta di colori alle immagini e ai video in bianco e nero o in bianco e nero è stata ormai ampiamente adottata da alcuni decenni. Le tecniche tradizionali di colorizzazione richiedono molti sforzi umani e sono più costose. Tuttavia, con l’avvento di tecnologie emergenti come l’intelligenza artificiale, questi due problemi principali stanno scomparendo lentamente. Non solo, ma abbiamo anche assistito al modo in cui i ricercatori stanno usando le tecniche del deepfake per scambiare volti di celebrità e altri volti famosi in tutto il mondo.
Diamo un’occhiata ai pochi film che sono stati colorati usando l’intelligenza artificiale.
Non invecchieranno
They Shall Not Grow Old è un film documentario che è stato diretto e prodotto da Peter Jackson nel 2018. Il documentario è stato creato con l’aiuto di filmati originali tratti dagli archivi del Museo della Prima Guerra Mondiale dell’Imperial War che includono foto e video mai visti prima . Il film ha utilizzato tecniche di restauro all’avanguardia, colorazione, tecnologie 3D e tratto da 600 ore di interviste archiviate dalla BBC per colorare i filmati originali in bianco e nero.
Pather Panchali
Un asst Il professore di ricerca dell’Università del Maryland negli Stati Uniti di nome Aniket Bera ha utilizzato tecniche basate sull’intelligenza artificiale per colorare alcune scene del classico cult Pather Panchali di Satyajit Ray. Secondo una casa dei media , Bera ha spiegato che il filmato è stato automaticamente ingrandito a 60 fps, 4K (Ultra High Definition) e colorato digitalmente usando “reti neurali profonde che includono DAIN, ESRGAN e DeOldify. Ha aggiunto che l’intero processo è automatico e richiede circa sei-sette ore, senza input manuale. Il tempo di elaborazione per frame era di circa 10 minuti, ma era completamente automatico.
La classe inattiva
I ricercatori dell’Università della Scienza e della Tecnologia di Hong Kong hanno presentato un metodo completamente automatico per colorare i film in bianco e nero senza alcuna guida o riferimenti umani. I ricercatori hanno colorato le scene di uno dei film popolari del grande Charlie Chaplin, The Idle Class (1921). La struttura di questa ricerca consiste in una rete di colorazione con tecniche di auto-regolarizzazione per migliorare la qualità della colorazione propagando i colori tra pixel simili di un fotogramma video, inclusa una rete di perfezionamento progettata per rendere più coerente la colorazione video migliorando la coerenza temporale tra i diversi fotogrammi.
Factory Scene – Modern Times (1936)
La famosa scena di fabbrica del film di Charlie Chaplin “Modern Times” è stata colorata con la tecnologia AI open source. Il codice utilizzato qui è DeOldify e le correzioni del colore di base sono state apportate sull’output AI.
L’arrivo di un treno alla stazione di La Ciotat
“L’Arrivée d’un train en gare de La Ciotat” dei fratelli Lumière è considerato uno dei primi film mai girati nel 1896. Secondo Mashable , Denis Shiryaev, che è il videografo, ha migliorato il film con l’aiuto di tecnologie emergenti come gli algoritmi di intelligenza artificiale, che hanno contribuito a migliorare il quadro indovinando quali siano le informazioni mancanti. Gli strumenti utilizzati da Shiryaev includono l’IA Gigapixel di Topaz Labs per l’upscaling a 4K, DAIN per l’aggiunta dei frame mancanti e DeOldify per aggiungere colore. Questi strumenti sono di provenienza aperta e disponibili al pubblico per gli sviluppatori.
La 317e Sezione 1964
Il trailer di questo vecchio film francese, La 317e, sezione 1964, è stato colorato da Redditor, mar_cnu (Marceau C.). Marceau C. ha utilizzato una tecnica avanzata di colorazione basata su reti neurali convoluzionali (CNN) in cui il modello è costituito da quattro componenti principali, che sono una rete di funzionalità di basso livello, una rete di funzionalità di medio livello, una rete di funzionalità globale e una rete di colorazione.
Riassumendo
Dai direttori del casting alla previsione della probabilità del successo di un film e alla scrittura di sceneggiature di film , l’intelligenza artificiale viene vista in diverse sezioni dell’industria dell’intrattenimento. A differenza delle tradizionali tecniche di colorazione, gli algoritmi basati sul deep learning hanno aiutato i ricercatori a rendere il processo molto più semplice ed efficiente in termini di tempo.
Nel 2018, i ricercatori di NVIDIA hanno sviluppato un algoritmo basato sull’apprendimento profondo che consente agli artisti visivi di colorare semplicemente un fotogramma in una scena e l’IA va al lavoro colorando il resto della scena in tempo reale. Sifei Liu, ricercatore di NVIDIA, ha dichiarato che il framework è veloce e può ottenere risultati in tempo reale. Ha aggiunto che il metodo produce anche risultati quantitativi migliori rispetto a diversi metodi all’avanguardia.
Tuttavia, attualmente non esistono film drammatici in bianco e nero che vengono completamente convertiti in colore con l’aiuto dell’intelligenza artificiale. Con questo ritmo nella ricerca, il giorno è più vicino quando saremo in grado di assistere a un vecchio film in bianco e nero in un film in HD colorato.