AI i sieci neuronowe pomogły użytkownikowi Reddita przekształcić stary film w rozdzielczość 4K przy 60 klatkach na sekundę.
Jednym z najbardziej znanych klipów w historii kina jest krótkometrażowy film „L’Arrivée d’un train à La Ciotat” (lub „Przyjazd pociągu na stację La Ciotat”). Bracia Lumière. Pierwotnie nagrany w 1896 roku, jak można sobie wyobrazić, ówczesne kamery nie rejestrowały dźwięku, więc posiadanie obrazu w ruchu było już wyczynem. Teraz możesz zobaczyć ten film w 4K przy 60 klatkach na sekundę.
AI wypełniła piksele, aby zwiększyć rozdzielczość do 4K
Użytkownik Reddita, Denis Shiryaev zdecydował się na to ulepszać klasyka z pomocą technologii. Zaczął skalować rozdzielczość obrazu do 4K za pomocą narzędzia o nazwie Gigapixel AI przez Topaz Labs.
To narzędzie umożliwia generowanie pikseli w celu zwiększenia rozmiaru oryginalnego obrazu w celu uzyskania wyższej rozdzielczości z możliwie największą szczegółowością. Możesz zobaczyć oryginalny film poniżej:
Oprócz poprawy rozdzielczości udało mu się również zwiększyć liczbę klatek na sekundę. Coś, co sprawia, że wyjście jest bardziej płynne.
Jak widać, ruch pociągu i ludzie przechadzający się po scenie wyglądają idealnie płynnie. Nie ma prawie żadnych przerw w ruchach, co czyni go zupełnie innym od oryginału. Sztuczna inteligencja jest tutaj używana do wypełnienia dodatkowych klatek, więc efekt końcowy jest absolutnie hipnotyczny.
W tym celu Shiryaev użył narzędzia o nazwie DAIN, który wykonuje serię super złożonych procesów wypełniających te nieistniejące dziury obrazami idealnie zsynchronizowanymi z resztą filmu.
Aby to osiągnąć, narzędzie analizuje obrazy, aby wykryć wizualny przepływ sceny, jej kontekst i jej głębię. Następnie generuje mapę cieplną, która ostatecznie tworzy idealny obraz dla ramki.
A potem dodał dźwięki jako ostatni szlif.
