ParaScale: 게이지 불변의 패랄락스 수를 이용한 스케일 보정 카메라 모션 전송
ParaScale: Scale-Calibrated Camera-Motion Transfer via a Gauge-Invariant Parallax Number
참조 영상의 카메라 움직임을 새로 생성된 영상에 적용하면 창작자가 시네마틱 효과를 재사용할 수 있습니다. 하지만 참조 영상과 대상 영상은 종종 호환되지 않는 크기를 가지는 경우가 많습니다. 예를 들어, 은하수를 스윕하는 동작과 책상 위를 미세하게 움직이는 동작이 있습니다. 이러한 경우, 단순히 복구된 궤적을 사용하는 것만으로는 인식할 수 없을 정도로 작거나 과장된 움직임이 나타납니다. 이는 기하학적인 사실 때문인데, 병진 운동에 의한 이미지 움직임은 ||T||/Z에 비례하며, 따라서 단안 궤적은 깊이-크기 게이지를 기준으로만 의미가 있습니다. 우리는 이러한 내용을 패랄락스 수 Pi = ||ΔT|| / Zbar로 요약했는데, 이는 카메라 움직림의 강도를 나타내는 무차원이고 게이지 불변적인 지표입니다. 우리는 이 값이 – 원시 궤적이 아닌 – 스케일 충실한 전송을 보존해야 하는 양량임을 증명합니다. ParaScale은 플러그 앤 플레이 모듈로, 모든 참조 영상에서 Pi 값을 추출하고 대상 장면의 깊이에 맞춰 프레임별로 재현하며, 회전은 변경하지 않습니다. 포즈 추출과 포즈 주입 사이에 위치하여 별도의 재학습이 필요 없으며, 어떤 포즈 기반 생성기에도 쉽게 통합될 수 있습니다. 또한, 우리는 패랄락스 일관성 오차(PCE)라는 스케일 대칭적인 지표를 도입했는데, 이는 유사도 정렬 방식인 TransErr과 달리 장면 크기의 불일치를 드러냅니다. ParaScale은 네 가지 이상의 크기 범위와 다양한 백본에서 구현된 파랄락스를 동일한 값으로 유지하고, 미보정 전송보다 PCE를 3배 이상 줄이면서 시각적 충실도를 손상시키지 않습니다.
Transferring the camera motion of a reference video to a freshly generated one lets creators reuse cinematic moves. Yet reference and target often live at incompatible scales -- a sweep across a galaxy versus a nudge across a desk -- and naively reusing the recovered trajectory yields either imperceptible or violently exaggerated motion. We trace this to a geometric fact: translation-induced image motion scales as ||T||/Z, so a monocular trajectory is meaningful only up to a depth-scale gauge. We distill this into the Parallax Number Pi = ||Delta T|| / Zbar, a dimensionless, gauge-invariant descriptor of how strongly a camera move is felt, and prove that it -- not the raw trajectory -- is the quantity that scale-faithful transfer must preserve. ParaScale is a plug-and-play module that reads Pi off any reference video and re-realizes it against the target scene's own depth, per frame, leaving rotation untouched. Sitting between pose extraction and pose injection, it requires no retraining and drops into any pose-conditioned generator. We further introduce the Parallax Consistency Error (PCE), a scale-symmetric metric that -- unlike the similarity-aligned TransErr -- exposes scene-scale mismatch. Across scale regimes spanning four orders of magnitude and multiple backbones, ParaScale keeps the realized parallax on the identity line and cuts PCE by more than 3x over uncalibrated transfer with no loss of visual fidelity.
No Analysis Report Yet
This paper hasn't been analyzed by Gemini yet.
Log in to request an AI analysis.