Vidmento: 맥락 인지 확장을 통한 생성 비디오를 활용한 비디오 스토리 제작

Vidmento: Creating Video Stories Through Context-Aware Expansion With Generative Video

비디오 스토리텔링은 종종 사용 가능한 자료의 제약으로 인해 창의적인 표현이 제한되고 원치 않는 스토리의 공백이 발생합니다. 생성 비디오는 캡처된 미디어에 맞춤형 시각적 요소를 추가하여 이러한 제한을 극복하는 새로운 방법을 제공합니다. 이러한 가능성을 탐구하기 위해, 우리는 여덟 명의 비디오 제작자를 인터뷰하여 생성 비디오를 워크플로우에 통합하는 데 있어 기회와 과제를 파악했습니다. 이러한 통찰력과 확립된 영화 제작 원칙을 바탕으로, 우리는 캡처된 미디어와 생성된 미디어를 맥락 인지 확장을 통해 결합하는 하이브리드 비디오 스토리 제작 도구인 Vidmento를 개발했습니다. Vidmento는 스토리 개발 기회를 제시하고, 주변 미디어와 스타일 및 내러티브적으로 조화를 이루는 클립을 생성하며, 미세 조정을 위한 제어 기능을 제공합니다. 12명의 제작자를 대상으로 한 연구에서, Vidmento는 생성 미디어를 사용하여 초기 자료를 체계적으로 확장함으로써 스토리 개발 및 탐색을 지원하고, 창의적인 의도에 부합하는 표현력 있는 비디오 스토리텔링을 가능하게 했습니다. 우리는 제작자들이 생성 콘텐츠를 통해 스토리의 공백을 어떻게 메우는지, 그리고 이 융합 기능이 어디에서 가장 가치 있는지에 대해 강조합니다.

Video storytelling is often constrained by available material, limiting creative expression and leaving undesired narrative gaps. Generative video offers a new way to address these limitations by augmenting captured media with tailored visuals. To explore this potential, we interviewed eight video creators to identify opportunities and challenges in integrating generative video into their workflows. Building on these insights and established filmmaking principles, we developed Vidmento, a tool for authoring hybrid video stories that combine captured and generated media through context-aware expansion. Vidmento surfaces opportunities for story development, generates clips that blend stylistically and narratively with surrounding media, and provides controls for refinement. In a study with 12 creators, Vidmento supported narrative development and exploration by systematically expanding initial materials with generative media, enabling expressive video storytelling aligned with creative intent. We highlight how creators bridge story gaps with generative content and where they find this blending capability most valuable.