AI 60fps 변환

Practical-RIFE 4.25 lite(MIT 라이선스)입니다. 두 프레임 사이의 움직임(광학 흐름)을 추정해 한가운데 시점의 장면을 그립니다. 공식 가중치를 브라우저용(ONNX)으로 바꿨고, 실제 영상 프레임에서 공식 PyTorch 결과와 97dB 이상으로 일치하는 것을 확인했습니다.

입력의 두 배입니다. 30fps는 60fps, 24fps는 48fps, 25fps는 50fps가 됩니다. 이미 60fps를 넘는 영상은 받지 않습니다. 영상 길이는 그대로입니다.

두 장면을 섞으면 겹친 잔상이 생기므로, 공식 스크립트와 같은 기준(두 프레임의 유사도 SSIM이 0.2 미만)으로 장면 전환을 찾아 섞지 않고 앞 프레임을 한 번 더 씁니다. 같은 그림이 이어지는 곳(SSIM 0.996 초과)도 계산하지 않고 그대로 씁니다.

빠르게 움직이거나 물체가 서로 가리는 곳(손을 흔들 때, 사람이 물체 앞을 지나갈 때)은 중간 장면이 흐리거나 늘어나 보일 수 있습니다. AI가 움직임을 예측해 그린 장면이기 때문입니다. 특히 애니메이션은 원래 같은 그림을 2~3프레임씩 쓰기 때문에 기대만큼 부드러워지지 않을 수 있습니다.

기기 GPU에 따라 다릅니다. M4 Pro 맥북에서 1080p 중간 프레임 한 장에 약 0.2초라, 10초 30fps 애니 영상이 27초, 매 프레임 움직이는 4초 영상이 23초 걸렸습니다. 4K는 한 장에 약 0.6초로, 5초 4K 영상이 1분 16초 걸렸습니다(4K는 처음 한 번 전용 모델 23MB를 더 받습니다). 같은 그림이 이어지는 구간은 계산하지 않아 더 빨리 끝납니다. 시작하기 전에 이 기기에서 실제로 잰 예상 시간을 보여 드립니다.

네. 중간 프레임 한 장에도 계산이 많아 CPU로는 실사용이 어렵습니다. 데스크톱 Chrome·Edge 최신 버전을 권장하며, 지원하지 않는 브라우저에서는 처음부터 안내를 띄웁니다.

소리는 다시 인코딩하지 않고 원본 데이터를 그대로 옮기므로 음질이 같고 싱크도 유지됩니다. 영상은 원본 프레임과 중간 프레임을 모두 같은 경로로 H.264(기기가 지원하지 않으면 HEVC·AV1)로 다시 인코딩합니다.