AI와 신경망은 Reddit 사용자가 오래된 영화를 60fps의 4K 해상도로 바꾸는 데 도움이 되었습니다.
영화사에서 가장 유명한 클립 중 하나는 단편 영화 “L’Arrivée d’un train à La Ciotat”(또는 The Arrival of the train to the La Ciotat station)입니다. 뤼미에르 형제. 원래 1896년에 녹음된 것처럼 상상할 수 있듯이 당시의 카메라는 소리를 포착하지 못했기 때문에 이미지를 움직이는 것은 이미 위업이었습니다. 이제 이 영화를 60fps에서 4K로 볼 수 있습니다.
AI가 픽셀을 채워 해상도를 4K로 높였습니다.
Reddit 사용자인 Denis Shiryaev는 기술의 도움으로 고전을 개선하기로 결정했습니다. 그는 Topaz Labs의 Gigapixel AI라는 도구를 사용하여 이미지 해상도를 4K로 조정하기 시작했습니다.
이 도구를 사용하면 원본 이미지의 크기를 늘리기 위해 픽셀을 생성하여 최대한의 디테일로 더 높은 해상도를 얻을 수 있습니다. 아래에서 원본 비디오를 볼 수 있습니다.
해상도를 높이는 것 외에도 프레임 속도도 높이는 데 성공했습니다. 출력을 더 유동적으로 만드는 것.
보시다시피 기차의 움직임과 장면을 걷는 사람들은 완벽하게 매끄럽게 보입니다. 움직임의 끊김이 거의 없어 원본과 완전히 다릅니다. AI는 여기에서 추가 프레임을 채우는 데 사용되므로 최종 결과는 절대적으로 최면입니다.
이를 위해 Shiryaev는 존재하지 않는 구멍을 영화의 나머지 부분과 완벽하게 동기화된 이미지로 채우는 일련의 매우 복잡한 프로세스를 수행하는 DAIN이라는 도구를 사용했습니다.
이를 달성하기 위해 분석 도구는 장면의 시각적 흐름, 맥락 및 깊이를 감지하기 위해 이미지를 분석합니다. 그런 다음 프레임에 대한 완벽한 이미지를 생성하는 히트맵을 생성합니다.
그리고 마지막 터치로 사운드를 추가했습니다.